consul+compose+template实现自动部署与负载均衡

• 实验环境：VMware Workstation 15.5、Xshell 6、Centos7.6

• 服务器IP地址规划：

名称及用途	IP地址
compose+consul+consul-template	192.168.50.143
registrator+web容器	192.168.50.144

• 实验步骤：

1、清空防火墙规则并关闭selinux

iptables -F
setenforce 0

2、将docker-compose移动到指定目录中

mv docker-compose /usr/local/bin/

3、赋予执行权限

chmod +x /usr/local/bin/docker-compose

4、创建一个目录

mkdir /root/consul

5、解压缩consul工具包

unzip consul_0.9.2_linux_amd64.zip

6、将解压出来的consul命令移动到bin目录下

mv consul /usr/bin

7、进行安装和相关配置

consul agent \   ## agent端
-server \       ## server端
-bootstrap \    ## 前端框架
-ui \        ## Web页面
-data-dir=/var/lib/consul-data \    ## 数据目录
-bind=192.168.50.143 \     ## 节点IP
-client=0.0.0.0 \         ## 监听地址为全网段
-node=consul-server01 &> /var/log/consul.log &     ## 节点名称及输出日志位置并让其后台运行

8、查看集群及节点信息

[root@localhost consul]# consul members
Node             Address              Status  Type    Build  Protocol  DC
consul-server01  192.168.50.143:8301  alive   server  0.9.2  2         dc1

[root@localhost consul]# consul info | grep leader
	leader = true
	leader_addr = 192.168.50.143:8300

还可以通过其他一些api来获取群集信息

查看节点具体详细信息：consul info
//通过httpd api获取集群信息
curl 127.0.0.1:8500/v1/status/peers    //查看集群server成员
curl 127.0.0.1:8500/v1/status/leader   //集群Raf leader
curl 127.0.0.1:8500/v1/catalog/services   //注册的所有服务
curl 127.0.0.1:8500/v1/catalog/nginx      //查看nginx服务信息
curl 127.0.0.1:8500/v1/catalog/nodes     //集群节点详细信息

9、打开浏览器访问web页面：192.168.50.143:8500

10、在另一台虚拟机上安装Gliderlabs/Registrator Gliderlabs/Registrator，可检查容器运行状态自动注册，还可注销docker容器的服务到服务配置中心，目前支持Consul、Etcd和SkuDNS2

docker run -d \
--name=redistrator \
--net=host \
-v /var/run/docker.sock:/tmp/docker.sock \
--restart=always \
gliderlabs/registrator:latest \
-ip=192.168.50.144 \
consul://192.168.50.143:8500

11、运行2个容器进行测试

docker run -itd -p:83:80 --name test01 -h test01 nginx     ## -h 主机名
docker run -itd -p:84:80 --name test02 -h test02 nginx

刷新网页可以看到多出了两个容器

12、安装 consul-template，Consul-Template是一个守护进程，用于实时查询Consul集群信息，并更新文件系统上任意数量的指定模板，生成配置文件，更新完成以后，可以选择运行shell命令执行更新操作，重新加载Nginx。Consul-Template可以查询Consul中的服务目录、Key、Key-values等。
这种强大的抽象功能和查询语言模板可以使Consul-Template特别适合动态的创建配置文件

在consul上操作：

创建一个模板：vim /root/consul/nginx.ctmpl

写入以下内容：

upstream http_backend {
  {{range service "nginx"}}
  server {{.Address}}:{{.Port}};
   {{end}}
}

server {
  listen 83;
  server_name localhost 192.168.50.140;
  access_log /var/log/nginx/test.com-access.log;
  index index.html index.php;
  location / {
    proxy_set_header HOST $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header Client-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
    proxy_pass http://http_backend;
    }
}

13、编译安装Nginx（过程略）

14、编辑并修改Nginx配置文件

vim /usr/local/nginx/conf/nginx.conf

http {
  include  mime.types;
  include  vhost/*.conf;         //添加虚拟主机目录
  default_type application/octet-stream;

15、创建虚拟主机目录及日志存放目录

mkdir /usr/local/nginx/conf/vhost
mkdir /var/log/nginx

16、启动Nginx

/usr/local/nginx/sbin/nginx

17、配置并启动 template

unzip consul-template_0.19.3_linux_amd64.zip   ## 解压缩

mv consul-template /usr/bin/     ## 将解压文件移动到指定目录下

启动template：

consul-template -consul-addr 192.168.50.140:8500 \
-template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/test.conf:/usr/local/nginx/sbin/nginx -s reload" \
--log-level=info

18、在宿主机上访问192.168.50.143:80，分别查看两台nginx容器日志，看是否有访问日志生成

docker logs -f test01
docker logs -f test02