centos7 搭建集群环境openshift3.10

最新推荐文章于 2025-04-17 10:42:50 发布
最新推荐文章于 2025-04-17 10:42:50 发布
阅读量793 收藏 11
点赞数 10
CC 4.0 BY-SA版权
文章标签： 服务器 网络 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weizhennan123/article/details/147294236

centos7 搭建集群环境openshift3.10

操作系统：
centos7.9
节点规划：
master：
8G/4H（cpu的虚拟化引擎选项全都打勾开启）
硬盘120G
node1：
4G/4H（cpu的虚拟化引擎选项全都打勾开启）
硬盘120G
node2：
4G/4H（cpu的虚拟化引擎选项全都打勾开启）
硬盘120G
下面安装部分的参考文档如下：
https://blog.youkuaiyun.com/huqigang/article/details/82351972
https://blog.youkuaiyun.com/qq_31977125/article/details/82912970
https://www.cnblogs.com/dukuan/p/8711717.html
https://www.cnblogs.com/mascot1/p/9571601.html

第一部分 初始化设置：

  1. 配置主机名
    hostnamectl set-hostname master
    hostnamectl set-hostname node1
    hostnamectl set-hostname node2

  2. 配置hosts文件（各个节点操作）：

    cat /etc/hosts
ip地址 master
ip地址 node1
ip地址 node2

  3. 开启selinux（各个节点操作）

    cat /etc/sysconfig/selinux 
SELINUX=enforcing 
SELINUXTYPE=targeted

    重启主机生效

  4. 修改配置文件ifcfg-ens33（各个节点操作）

    cat /etc/sysconfig/network-scripts/ifcfg-ens33 

添加如下参数 
NM_CONTROLLED=yes //启用网络控制，即修改后可以实时生效，修改后无需要重启网卡立即生效 

修改好之后重启网络 
service network restart

  5. 停掉NetworkManager，iptables，firewalld（各个节点操作）

    systemctl stop NetworkManager
systemctl disable NetworkManager
systemctl stop firewalld
systemctl stop iptables
systemctl disable firewalld
systemctl disable iptables

  6. 在master节点生成密钥，分发到各node节点（master节点操作）

    ssh-keygen -t rsa
ssh-copy-id -i .ssh/id_rsa.pub master
ssh-copy-id -i .ssh/id_rsa.pub node1
ssh-copy-id -i .ssh/id_rsa.pub node2

  7. ntpdate做时间同步（各个节点操作）

    ntpdate time2.aliyun.com

  8. 安装基础包（各个节点操作）

    yum update -y

yum install -y wget git net-tools bind-utils yum-utils iptables-services bridge-utils bash-completion kexec-tools sos psacct java-1.8.0-openjdk-headless python-passlib

yum -y install wget net-tools nfs-utils lrzsz gcc gcc-c++ make cmake libxml2-devel openssl-devel curl curl-devel unzip sudo ntp libaio-devel wget vim ncurses-devel autoconf automake zlib-devel python-devel epel-release lrzsz openssh-server socat ipvsadm conntrack

  9. 安装ansible2.6.5（master节点操作.openshift3.10需要安装ansible2.6.5，否则会报错）
    在这里插入图片描述
    yum install ansible-2.6.5-1.el7.ans.noarch.rpm

  10. 上传openshift-3.10安装包到master节点
    https://mirror.openshift.com/pub/openshift-v4/clients/ocp/
    在这里插入图片描述
    解压：unzip openshift-ansible-release-3.10.zip /root/

  11. 安装docker（各个几点操作）

yum install -y docker-1.13.1

（1）修改docker配置文件

cat /etc/sysconfig/docker

之前的OPTIONS注释掉，变成下面这行
OPTIONS='--selinux-enabled=false --signature-verification=False'

（2）配置docker镜像加速器

cat /etc/docker/daemon.json
{"registry-mirrors": ["http://6e9e5b27.m.daocloud.io"]}

重启docker
systemctl daemon-reload
systemctl restart docker.service

（3）配置私有仓库（在master节点操作）

docker pull registry:2.5

yum install httpd -y

service httpd start

chkconfig httpd on

mkdir -p /opt/registry-var/auth/

#生成用户名/密码访问 （这里设置用户名admin , 密码 admin）
docker run --entrypoint htpasswd registry:2.5 -Bbn admin admin  >> /opt/registry-var/auth/htpasswd

设置配置文件(注意yml文件格式)
mkdir -p /opt/registry-var/config
vim /opt/registry-var/config/config.yml
在这里插入图片描述
启动服务

docker run -d -p 5000:5000 --restart=always  --name=registry -v /opt/registry-var/config/:/etc/docker/registry/ -v /opt/registry-var/auth/:/auth/ -e "REGISTRY_AUTH=htpasswd"  -e "REGISTRY_AUTH_HTPASSWD_REALM=Registry Realm" -e REGISTRY_AUTH_HTPASSWD_PATH=/auth/htpasswd -v /opt/registry-var/:/var/lib/registry/ registry:2.5

配置https权限支持（在master，node1，node2上均做修改）
由于harbor为了安全性考虑，默认是需要https证书支持的

在这里插入代码片

vim /etc/docker/daemon.json
{
“registry-mirrors”: [“http://6e9e5b27.m.daocloud.io”],
“insecure-registries”:[“103.104.222.33:5000”]
}

重启docker

systemctl daemon-reload
systemctl restart docker.service

测试私有仓库是否可以登陆（各个节点均操作）

docker login 103.104.222.33:5000

输入用户名和密码显示如下说明登陆成功，其他机器如果想要push或者pull镜像到这个私有仓库，需要docker login 103.104.222.33:5000 输入用户名和密码登陆成功之后才可以上传下载
在这里插入图片描述

1、报错现象及原因 
报错：Warning: failed to get default registry endpoint from daemon (Cannot connect to the Docker daemon. Is the docker daemon running on this host?). 
原因：刚装完docker服务没有启动，启动命令如下 

$ sudo systemctl start docker.service 

2、其它报错 
启动后不加sudo 操作诸如docker ps的命令依然会报以下错误 
Got permission denied while trying to connect to the Docker daemon socket at unix:///var/run/docker.sock: Get http://%2Fvar%2Frun%2Fdocker.sock/v1.38/info: dial unix /var/run/docker.sock: connect: permission denied 需要添加当前用户到docker用户组，命令如下 

$ sudo usermod -aG docker $USER && newgrp docker

（4）设置docker开机自启动

systemctl enable docker
systemctl is-active docker

（5）配置docker 后端存储，
所有节点
/etc/sysconfig/docker-storage-setup修改如下内容：

vi /etc/sysconfig/docker-storage-setup
VG=centos #使用一个已建立的卷组，作为docker的后端存储

所有Node节点执行

docker-storage-setup

内部做的操作：

将空余块设备（可以是分区）创建成physical volume（pv） 
在由这些PV组成volume group（vg） 
从vg中建立两个logical volume（lv），data和matedata 
将data和matedata映射成thin-pool

12.下载镜像
master节点：

docker pull quay.io/coreos/etcd:v3.2.22
docker pull openshift/origin-control-plane:v3.10
docker pull docker.io/openshift/origin-service-catalog:v3.10
docker pull openshift/origin-node:v3.10
docker pull openshift/origin-deployer:v3.10
docker pull openshift/origin-deployer:v3.10.0
docker pull openshift/origin-template-service-broker:v3.10
docker pull openshift/origin-pod:v3.10
docker pull openshift/origin-pod:v3.10.0
docker pull openshift/origin-web-console:v3.10
docker pull openshift/origin-docker-registry:v3.10
docker pull openshift/origin-docker-registry:v3.10
docker pull openshift/origin-haproxy-router:v3.10
docker pull cockpit/kubernetes:latest
docker pull docker.io/cockpit/kubernetes:latest
docker pull docker.io/openshift/origin-control-plane:v3.10
docker pull docker.io/openshift/origin-deployer:v3.10
docker pull docker.io/openshift/origin-docker-registry:v3.10
docker pull docker.io/openshift/origin-haproxy-router:v3.10
docker pull docker.io/openshift/origin-pod:v3.10
docker pull quay.io/coreos/etcd:v3.2.22

node1和node2节点：

docker pull quay.io/coreos/etcd:v3.2.22
docker pull openshift/origin-control-plane:v3.10
docker pull openshift/origin-node:v3.10
docker pull docker.io/openshift/origin-node:v3.10
docker pull quay.io/coreos/etcd:v3.2.22
docker pull openshift/origin-haproxy-router:v3.10
docker pull openshift/origin-deployer:v3.10
docker pull openshift/origin-pod:v3.10
docker pull ansibleplaybookbundle/origin-ansible-service-broker:v3.10
docker pull openshift/origin-docker-registry:v3.10
docker pull openshift/origin-docker-registry:v3.10
docker pull cockpit/kubernetes:latest
docker pull openshift/origin-haproxy-router:v3.10
docker pull docker.io/cockpit/kubernetes:latest
docker pull docker.io/openshift/origin-control-plane:v3.10
docker pull docker.io/openshift/origin-deployer:v3.10
docker pull docker.io/openshift/origin-docker-registry:v3.10
docker pull docker.io/openshift/origin-haproxy-router:v3.10
docker pull docker.io/openshift/origin-pod:v3.10
docker pull quay.io/coreos/etcd:v3.2.22

可以将所有命令放入文本文件registry，由脚本执行docker pull

#!/bin/bash
cat ./registry|while read line;do
    ${line}
    sleep 120     #每pull一个镜像，等待120秒
done

13.配置ansible的hosts文件
cat /etc/ansible/hosts

[OSEv3:children]
masters
nodes
etcd
[OSEv3:vars]
openshift_deployment_type=origin
ansible_ssh_user=root
ansible_become=yes
openshift_repos_enable_testing=true
openshift_enable_service_catalog=false
template_service_broker_install=false
debug_level=4
openshift_clock_enabled=true
openshift_version=3.10.0
openshift_image_tag=v3.10
openshift_disable_check=disk_availability,docker_storage,memory_availability,docker_image_availability,os_sdn_network_plugin_name=redhat/openshift-ovs-multitenant i
openshift_master_identity_providers=[{'name': 'htpasswd_auth','login': 'true', 'challenge': 'true','kind': 'HTPasswdPasswordIdentityProvider'}]
[masters]
master
[nodes]
master openshift_node_group_name='node-config-master'
node1 openshift_node_group_name='node-config-master'
node2 openshift_node_group_name='node-config-master'
[etcd]
master

14.安装集群
（1）安装前预配置检查

ansible-playbook -i /etc/ansible/hosts openshift-ansible-release-3.10/playbooks/prerequisites.yml

检查如果显示如下，则没有报错，那么开始安装
在这里插入图片描述
（2）安装

ansible-playbook -i /etc/ansible/hosts openshift-ansible-release-3.10/playbooks/deploy_cluster.yml

执行deploy时主机dns导致连外网失败（在执行上面deploy时，需要在每个节点ping www.baidu.com，如果ping不通，解决方案如下）
临时解决方案更改/etc/resolv.conf
当部署的时候看到retry，就需要在master和node节点执行下面命令，这样就可以继续ping通外网
echo nameserver 8.8.8.8 >>/etc/resolv.conf

需要给节点打标签
TASK [openshift_manage_node : Set node schedulability]
到这个task之后执行下面部分

oc label node node1 node-role.kubernetes.io/infra=true
oc label node node2 node-role.kubernetes.io/infra=true

echo nameserver 8.8.8.8 >>/etc/resolv.conf
显示如下，说明安装成功
在这里插入图片描述
15.创建管理员账号

首次新建用户密码
htpasswd -cb /etc/origin/master/htpasswd admin admin

添加用户密码
htpasswd -b /etc/origin/master/htpasswd dev dev

以集群管理员登录
oc login -u system:admin

给用户分配一个集群管理员角色
oc adm policy add-cluster-role-to-user cluster-admin admin

16.在浏览器登陆console控制台
https://master:8443
注意这里有个坑，openshift的web console要用域名登录，做好域名IP映射（etc/hosts）
账号：admin
密码：admin
在这里插入图片描述

Centos7上部署Openshift Origin3.9
炮哥技术分享
01-05 2875
概述 openshift origin是红帽研发的一套开源容器平台，是基于kubernetes又封装了一些对象，不同于kubernetes，openshift origin有完整的CI/CD流程，更适合公司或商业使用。后面我会陆续推出一系列关于openshift origin的文章，版本是3.9。 本文说的是用ansible playbook安装高可用openshift origin集群。 准备至...
Centos7部署Openshift
qq_37106658的博客
04-18 862
环境 Centos7系统 安装docker 使用yum命令安装vim以及docker yum install vim docker -y 配置docker镜像加速器 sudo mkdir -p /etc/docker sudo tee /etc/docker/daemon.json <<-'EOF' { "registry-mirrors": ["https://w...
centos7安装OpenShift
纵横四海的博客
06-23 1万+
本文采用all-in-one(一体化的)安装OpenShift记得安装docker yum install docker 安装docker 之后 就执行 vi /etc/sysconfig/docker 开始安装OpenShift： 1.设置SELINUXTYPE=targeted 把SELINUXTYPE 设置为targeted 一般默认就可以: 如果默认不是这个
centos7搭建openshift
最新发布
weizhennan123的博客
04-17 299
这里先停止服务，设置为本机IP:192.168.30.17。默认是以127.0.0.1为集群server的IP。3.加载daemon配置，启动docker。4.下载openshift3.9。2.配置daemon.json。6.加载到环境变量PATH中。1.安装docker。7.执行安装启动命令。
CentOS 7 上安装openshift - 20190928
shenghuiping2001的专栏
09-28 2253
1: 先下载openshift 的安装包：https://pan.baidu.com/s/1OYhuaMJ_goa4DGZnU8GVcQ（取官网安装也可以，但是还是这个link 好用）. 2: 安装docker, 我的docker 已经安装好了 3: 启动docker: systemctl start docker 4: 设置开机启动： systemctl enable docker. ...
部署OpenShift3.10版
陈十一yi
07-13 612
基础配置
CentOS7.9上部署OpenShift3.11集群
xvktdmjg的博客
07-25 958
CentOS7.9上部署OpenShift3.11集群 OCP官网文档：https://docs.openshift.com/container-platform/3.11/welcome/index.html 版本： openshift 3.11.0 centos7.9 ansible 2.6.5 环境信息 主机名 IP 系统版本 配置 master.ocp.cn 192.168.108.110 CentOS 7.9 4C2G node1.ocp.cn 192.168.108.11
openshift 3.10多节点集群安装（基于Ansible和Centos7.4）
个人学习记录
09-06 7612
参考官方文档https://docs.okd.io/3.10/install/index.html，基于Ansible安装3.10版openshift集群。 特注：本文仅供初学者参考！生产环境请结合实际并参照官方文档！（本文尽量往生产环境上靠） 安装规划 个人电脑资源有限，这里采用双节点集群，这两个节点既是master，又是node，也是etcd，并挂HAProxy负载平衡maste...
[Hadoop]在CentOS7上使用Docker部署Hadoop
dannistang的博客
04-25 4268
在踩了众多的坑之后，即使是使用阿里云开源的Docker镜像来部署Hadoop，也会出现很多错误，本文帮助你更好的使用Docker来部署全分布式Hadoop的环境，如果出现问题的，请联系tangweixuan1995@foxmail.com，请支持原创
Docker入门【Centos7安装Docker&Docker基本命令】
m0_67094505的博客
12-05 448
目录一、Docker简介二、Docker环境配置三、Docker阿里云镜像仓库配置阿里云镜像仓库的配置-知识总结：四、常用命令Docker基本命令Docker镜像命令Docker镜像常用命令Docker容器常用命令新一代虚拟化技术。Docker 是一个开源的应用容器引擎，基于 Go 语言 并遵从Apache2.0协议开源。Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流行的 Linux 机器上，也可以实现虚拟化。容器是完全使用沙箱机制，相互之间不会有任何接口（
centos7搭建mysql集群
05-15
centos7搭建mysql集群，包含整个搭建步骤，部分错误解决方案
linux-centos7 集群环境搭建
qq_34304427的博客
09-15 1682
CPU：1 * 2内存：> 2G系统：Centos7_x64 最小安装数量：3 台服务器。
基于红帽openshift搭建生产环境高可用集群教程（详尽步骤）
完颜振江
03-28 2058
搭建生产环境的高可用 OpenShift 集群是一个复杂的过程，需要注意许多细节和步骤。以下是一个大致的指南，但是请注意，由于软件版本、配置和网络环境的不同，实际步骤可能会有所变化。在开始之前，请确保你已经熟悉了 OpenShift 的基本概念和安装要求。
CentOS7搭建hadoop集群
热门推荐
浩瀚蓝天dep的博客
12-12 1万+
说明： 1.准备三台虚拟机，参考：CentOS7集群环境搭建(以3台为例) 2.配置虚拟机间免密登陆：参考：CentOS7集群配置免密登录 3.虚拟机分别安装jdk：参考：CentOS7集群安装JDK1.8 准备开始搭建hadoop集群，以下操作在第一台机器node1执行： 1.上传并解压hadoop安装包 1.1上传安装包到/develop/software mkdir -p /develop/software mkdir -p /devel...
【云原生】本地搭建Openshift单机最小化开发环境
03-27 1944
CodeReady Containers 内置一个最小的、预配置的 OpenShift（包含kunernetes），只要你的笔记本或者台式计算机的配置稍微比较好，那么是可以轻松安装的，它提供了一个快速、简单的方式来在本地计算机上搭建一个容器化的开发环境，日常开发和测试是非常方便的。
Centos7集群环境配置
weixin_45887253的博客
04-07 395
欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。 新的改变 我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客： 全新的界面设计 ，将会带来全新的写作体验； 在创作中心设置你喜爱的代码高亮样式，Markdown 将代码片显示选择的高亮样式 进行展示； 增加了 图片
CentOS7安装Hadoop集群完整步骤
weixin_55076626的博客
05-26 1万+
1. 安装3台centos7服务器 1.1.配置名字hadoop01\hadoop02\hadoop03 hostnamectl set-hostname hadoop01 hostnamectl set-hostname hadoop02 hostnamectl set-hostname hadoop03 1.2.修改hosts文件 vi /etc/hosts 文件末尾添加以下内容： hadoop01的ip地址 hadoop01 hadoop02的ip地址 hadoop02 ha
Red Hat OpenShift 4.8 环境集群搭建
爱死亡机器人
03-07 186
知识点 主题涵盖OpenShift容器平台4.8特性: Single-node OpenShift Container Platform cluster JSON logging Certified Helm repositories Vertical Pod Autoscaler (VPA) Serverless GitOps Pipelines 集群节点 一个用于命令行访问集群的bastion主机 一个单节点OpenShift容器平台集群，部署OpenShift容器平台和应用程序 一个Elast
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

clarence.wei

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值