jenkins+rancher+k8s+docker 集群_rancher jenkins-优快云博客

本文链接：https://blog.youkuaiyun.com/MLTR1/article/details/117229114

前言

第一次从无到有部署一个集群环境，踩了很多坑。在此记录下，帮助刚准备或者是正在踩坑的同学们。

环境准备，多台安装有centos的服务器或者虚拟机

ip	hostname	安装内容	描述
192.168.1.100	harbor	docker，docker-compose, harbor, jenkins	作为集群主节点
192.168.1.101	node.master	docker，k8s，rancher-server	作为集群主节点
192.168.1.102	node1.slave	docker，k8s，rancher-client	作为集群从节点
192.168.1.103	node2.slave	docker，k8s，rancher-client	作为集群从节点

一、软件包安装/基础配置修改

安装ntpdate，同步服务器时间
rpm -ivh http://mirrors.wlnmp.com/centos/wlnmp-release-centos.noarch.rpm
yum install wntp
ntpdate ntp1.aliyun.com
如果出现
Error: Failed to download metadata for repo 'appstream': Cannot prepare internal mirrorlist: No URLs in mirrorlist
执行如下语句
cd /etc/yum.repos.d/
sed -i 's/mirrorlist/#mirrorlist/g' /etc/yum.repos.d/CentOS-*
sed -i 's|#baseurl=http://mirror.centos.org|baseurl=http://vault.centos.org|g' /etc/yum.repos.d/CentOS-*
yum update -y
安装基础软件包
yum install -y conntrack ipvsadm ipset jq iptables curl sysstat libseccomp wget
关闭swap
swapoff -a
修改/etc/hosts, 添加主机
192.168.4.241 node.master
192.168.4.242 node1.slave
192.168.4.243 node2.slave
修改启动项etc/default/grub
在GRUB_CMDLINE_LINUX项末尾加上 numa=off 如下(不太明白为什么）：
GRUB_CMDLINE_LINUX="crashkernel=auto resume=/dev/mapper/cl-swap rd.lvm.lv=cl/root rd.lvm.lv=cl/swap rhgb quiet numa=off"
关闭selinux, 修改/etc/selinux/config文件，SELINUX=disabled
setenforce 0

二、harbor安装

网上有较多的指导，这里就不赘述了，贴一个帖子

https://blog.youkuaiyun.com/shawn210/article/details/98068165

如果有遇到ssl的问题，可以把install.sh 文件https的内容删除掉，关于docker的安装可以参考下一节的内容

三、docker安装

配置国内镜像源
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo 或 dnf config-manager --add-repo=https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
更新podman包
yum erase podman buildah
安装containerd.io包
`yum install https://download.docker.com/linux/centos/8/x86_64/stable/Packages/containerd.io-1.4.3-3.1.el8.x86_64.rpm
安装docker
yum install docker-ce -y
systemctl enable docker && systemctl start docker
修改配置文件 /usr/lib/systemd/system/docker.service, 在ExecStart 末尾加上harbor地址
--insecure-registry 192.168.1.100
systemctl restart docker
防火墙不能关闭，需开启22/tcp,80/tcp,443/tcp,2379/tcp,2380/tcp,6443/tcp,8972/udp 端口, 集群间通信会用到这几个端口
firewall-cmd --zone=public --add-port=2379/tcp --permanent
firewall-cmd --reload

安装/配置 rancher

在master节点上安装rancher server
执行：
docker run --privileged -d --restart=unless-stopped -p 80:80 -p 443:443 --name rancher rancher/rancher:stable
等待安装完成
~
待安装完成后，浏览器登录rancher完成配置