Centos7使用Docker搭建PXC+双HaProxy高可用MySQL集群

最新推荐文章于 2024-04-19 11:44:07 发布
原创 最新推荐文章于 2024-04-19 11:44:07 发布 · 390 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#docker #mysql #centos

本文详细介绍如何在Docker环境下搭建Percona XtraDB数据库集群，包括Docker的安装与配置、IPv4转发设置、镜像拉取与重命名、网络配置、创建容器与卷、数据库与用户创建、Haproxy配置及集群监控界面的搭建。

1. 安装Docker

  1. 卸载旧版本

    $ sudo yum remove docker docker-client docker-client-latest docker-common docker-latest docker-latest-logrotate docker-logrotate docker-engine

  2. 更新、添加软件源

    $ sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo
$ sudo yum update

  3. 安装

    $ sudo yum install docker-ce

  4. 加入docker用户组

    $ sudo usermod -aG docker USER_NAME

  5. 添加docker到开机启动

    $ sudo systemctl enable docker

  6. 启动docker

    $ service docker start

2. 开通IPv4转发

  1. 由于后面容器间通讯需要防火墙转发，所以需要开通IPv4转发
    出于安全考虑，Linux系统默认是禁止数据包转发的。所谓转发即当主机拥有多于一块的网卡时，其中一块收到数据包，根据数据包的目的ip地址将包发往本机另一网卡，该网卡根据路由表继续发送数据包。
    vim /usr/lib/sysctl.d/00-system.conf
添加 net.ipv4.ip_forward=1
systemctl restart network

3. 准备相关镜像

  1. percona/percona-xtradb-cluster

    docker pull percona/percona-xtradb-cluster
docker tag docker.io/percona/percona-xtradb-cluster pxc # 修改镜像名称
docker network create --subnet=172.18.0.0/24 pxc_network # 指定特定的网段
docker network inspect network20 # 查看网段详细信息

  2. haproxy

    docker pull haproxy

4. 创建docker卷

  1. 创建一个docker卷，自定义名称为 v1

    docker volume create --name v1

  2. 查看数据卷信息

    docker volume inspect v1
[
    {
        "Driver": "local",
        "Labels": {},
        "Mountpoint": "/var/lib/docker/volumes/v1/_data", # 容器创建的配置文件存放在这个目录下 /var/lib/docker/volumes/
        "Name": "v1",
        "Options": {},
        "Scope": "local"
    }
]

5. 创建PXC容器, 两个分片的pxc集群

  1. docker命令

    docker run -d -p 3306:3306 -e MYSQL_ROOT_PASSWORD=mysql -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=mysql -v v11:/var/lib/mysql --privileged --name=node1 --net=pxc_network --ip=172.18.0.2 pxc
		
docker run 
-d # -d 容器后台运行
-p 3311:3306 # -p 端口映射，[宿主机端口]:[容器端口]
-e MYSQL_ROOT_PASSWORD=msyql # -e 启动参数
-e CLUSTER_NAME=PXC 
-e XTRABACKUP_PASSWORD=mysql # 数据库间节点同步密码
-v volume-mysql-1:/var/lib/mysql # [宿主机目录(数据卷)]:[容器目录]
--privileged # 最高权限
--name node1
--net pxc_network --ip 172.20.0.2 # 给容器指定网段，指定IP
pxc

  2. PXC1

    docker run -d -p 3306:3306 -e MYSQL_ROOT_PASSWORD=mysql -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=mysql -v v11:/var/lib/mysql --privileged --name=node1 --net=pxc_network --ip=172.18.0.2 pxc
docker run -d -p 3307:3306 -e MYSQL_ROOT_PASSWORD=mysql -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=mysql -e CLUSTER_JOIN=node1 -v v2:/var/lib/mysql --privileged --name=node2 --net=pxc_network --ip=172.18.0.3 pxc
docker run -d -p 3308:3306 -e MYSQL_ROOT_PASSWORD=mysql -e CLUSTER_NAME=PXC -e XTRABACKUP_PASSWORD=mysql -e CLUSTER_JOIN=node1 -v v3:/var/lib/mysql --privileged --name=node3 --net=pxc_network --ip=172.18.0.4 pxc

  3. PXC2

    docker run -d -p 3316:3306 -e MYSQL_ROOT_PASSWORD=mysql -e CLUSTER_NAME=PXC2 -e XTRABACKUP_PASSWORD=mysql -v v4:/var/lib/mysql --privileged --name=node4 --net=pxc_network --ip=172.18.0.5 pxc
docker run -d -p 3317:3306 -e MYSQL_ROOT_PASSWORD=mysql -e CLUSTER_NAME=PXC2 -e XTRABACKUP_PASSWORD=mysql -e CLUSTER_JOIN=node4 -v v5:/var/lib/mysql --privileged --name=node5 --net=pxc_network --ip=172.18.0.6 pxc
docker run -d -p 3318:3306 -e MYSQL_ROOT_PASSWORD=mysql -e CLUSTER_NAME=PXC2 -e XTRABACKUP_PASSWORD=mysql -e CLUSTER_JOIN=node4 -v v6:/var/lib/mysql --privileged --name=node6 --net=pxc_network --ip=172.18.0.7 pxc

6. 数据库、用户创建

  1. 数据库、用户

    CREATE DATABASE dbname DEFAULT CHARACTER SET utf8;
CREATE USER 'dbuser'@'%' IDENTIFIED WITH mysql_native_password BY 'password';
GRANT ALL ON db.* TO 'dbuser'@'%' WITH GRANT OPTION;

  2. pxc集群里面创建haproxy用户并授予权限

    CREATE USER 'haproxy'@'%' IDENTIFIED BY '';

7. 配置Haproxy

  1. 在host主机上写好配置文件，启动容器时候读取haproxy.cfg，

    vim /usr/local/docker/haproxy/haproxy.cfg
vim /usr/local/docker/haproxy2/haproxy.cfg
global
    #工作目录
    chroot /usr/local/etc/haproxy
    #日志文件，使用rsyslog服务中local5日志设备（/var/log/local5），等级info
    log 127.0.0.1 local5 info
    #守护进程运行
    daemon
defaults
    log global
    mode    http
    #日志格式
    option  httplog
    #日志中不记录负载均衡的心跳检测记录
    option  dontlognull
    #连接超时（毫秒）
    timeout connect 5000
    #客户端超时（毫秒）
    timeout client  50000
    #服务器超时（毫秒）
    timeout server  50000
#监控界面
listen  admin_stats
    #监控界面的访问的IP和端口
    bind  0.0.0.0:8888
    #访问协议
    mode        http
    #URI相对地址
    stats uri   /dbs
    #统计报告格式
    stats realm     Global\ statistics
    #登陆帐户信息
    stats auth  admin:haproxy
#数据库负载均衡
listen  proxy-mysql
    #访问的IP和端口
    bind  0.0.0.0:3306
    #网络协议
    mode  tcp
    #负载均衡算法（轮询算法）
    #轮询算法：roundrobin
    #权重算法：static-rr
    #最少连接算法：leastconn
    #请求源IP算法：source
    balance  roundrobin
    #日志格式
    option  tcplog
    #在MySQL中创建一个没有权限的haproxy用户，密码为空。Haproxy使用这个账户对MySQL数据库心跳检测
    option  mysql-check user haproxy
    server  MySQL_1 172.18.0.2:3306 check weight 1 maxconn 2000
    server  MySQL_2 172.18.0.3:3306 check weight 1 maxconn 2000
    server  MySQL_3 172.18.0.4:3306 check weight 1 maxconn 2000
    #使用keepalive检测死链
    option  tcpka

  2. 启动haproxy容器

    # 第一个haproxy
docker run -it -d -p 4001:8888 -p 4002:3306 -v /usr/local/docker/haproxy:/usr/local/etc/haproxy --name h1 --privileged --net=pxc_network --ip 172.18.0.10 haproxy
# 第二个haproxy
docker run -it -d -p 4003:8888 -p 4004:3306 -v /usr/local/docker/haproxy2:/usr/local/etc/haproxy --name h2 --privileged --net=pxc_network --ip 172.18.0.20 haproxy

  3. 启动\重启haproxy

    docker exec -it h1 bash
haproxy -f /usr/local/etc/haproxy/haproxy.cfg # 启动
haproxy -f /usr/local/etc/haproxy/haproxy.cfg -sf # 重启

8. 集群监控界面

  1. 地址

    http://ip:4001/dbs
http://ip:4003/dbs

参考：
https://www.bbsmax.com/A/gVdngYYEzW/
https://www.bbsmax.com/A/xl56Orr9dr/
https://www.jianshu.com/p/f35b6254c2b0
https://qizhanming.com/blog/2019/01/25/how-to-install-docker-ce-on-centos-7

Docker+PXC+Haproxy搭建高可用强一致性的MySQL集群
m0_62920707的博客
09-26 808
超详细！！！Docker+PXC+Haproxy搭建高可用强一致性的MySQL集群
HAproxy实现PXC负载均衡keepalived高可用
Du.的博客
03-28 948
搭建PXC集群，可参考https://blog.youkuaiyun.com/du18020126395/article/details/115289632步骤1~9 环境规划 hostname 系统版本 备注 10.45.7.128 rac3 redhat7.4 PXC节点1（node1） 10.45.7.129 rac4 ..
docker PXC集群+haproxy+keepalived搭建
Yuvraj的博客
09-21 1051
安装PXC镜像 docker pull percona/percona‐xtradb‐cluster:5.7.21 #强烈推荐安装5.7.21版本的PXC镜像，兼容性最好，在容器内可以执行apt-get安装各种程序包。最新 版的PXC镜像内，无法执行apt-get，也就没法安装热备份工具了 为PXC镜像改名 docker tag percona/percona‐xtradb‐clust...
mysql之PXC5.7.18集群系列——2.HAProxy
nloneday
09-11 753
1. 相关准备 官方网站：http://www.haproxy.org 2. 编译安装 # cd /home/soft/haproxy.1.7.8 # make TARGET=linux26 prefix=/home/soft/haproxy # make install PREFIX=/home/soft/haproxy 3. 创建用户 # useradd haprox
进度记录【Day5】pxc集群/haproxy代理
Rotark的博客
04-08 634
目录Day5常见的mysql集群解决方案1. Replication方案2. PXC方案PXC集群方案1、拉取pxc镜像2、创建新的网络3、创建5个volume挂载卷4、启动5个pxc容器制作haproxy镜像1、不使用官方的haproxy镜像的原因2、制作haproxy镜像的步骤3、在 pxc集群中创建一个用户给 haproxy使用4、集群的伸缩：在 pxc集群中再添加一个pxc6节点4、启一个...
Mysql+haproxy+mycat+pxc+zookeeper实现高可用集群
QUAN的MYSQL之旅
08-04 2350
Mysql+haproxy+mycat+pxc+zookeeper实现高可用集群 1.应用程序通过HaProxy访问Mycat 2.Mycat实现分库分表以及根据访问的表选择不同的数据库 3.读写user表时通过Mycat节点1访问数据库并使用Percona-xtraDB-Cluster(pxc)实现强同步 4.读写ordertest表时则通过Mycat节点2访问数据库，两个数据库之间一主一从实现读写分离 5.user表引入了zookeeper工具，利用zkID生成器保证ID不会重复。
基于Docker搭建Mysql的PXC集群+haproxy+双机热备份实现高可用
IT_Bigboy_sz的博客
07-12 1220
之前我已经搭建过PXC集群可以参考我之前的文章https://mp.youkuaiyun.com/mdeditor/95048994# 1、拉取镜像 docker pull haproxy 2、配置haproxy的文件 1.sudo touch /usr/local/docker/haproxy/haproxy.cfg 2.sudo vi /usr/local/docker/haproxy/haprox...
docker下用keepalived+Haproxy实现高可用负载均衡集群
热门推荐
布偶猫爸爸的博客
10-08 1万+
先记录下遇到的坑，避免之后忘了； 花时间最多去解决的一个题是：在docker下启动haproxy服务后在这个docker服务内安装keepalived无法ping通的问题，虽然最后也是莫名其妙就好了，但是加强了不少对docker的理解和还需深入学习的地方。   为什么要用keepalived+haproxy实现docker下的高可用负载均衡？在不同环境下有哪些方式可以实现高可用负载均衡？ ...
单机三pxc节点集群,+docker-haproxy2.0负载均衡实现
最新发布
cyw8998的专栏
04-19 812
一.下载或者在这里下载（下面需要的各个配置文件都有）：二.编写文件，制作docker镜像4.制作镜像三.启动pxc和harproxy1.dock-compose制作镜像并启动pxc，见上一篇文章，pxc8证书制作也略#docker-compose up -d db1 先检测第一个主点，成功后再执行下一句注意docker-compose定义的卷标名和network名，在生成docker后，查看都带着前缀5.启动一下haproxy。
运维学习（三）Docker环境下使用Keepalive+Haproxy实现数据库负载均衡的高可用
皮皮秀的微博
04-24 1646
在第二篇中已经实现了数据库负载均衡中间件Haproxy的部署运行。 但当单台Haproxy出现问题时，数据库集群的负载均衡也就失效了。为了保证Haproxy的高可用，单台Haproxy也是不够的。 因此需要实现多台Haproxy的部署运行 （双机热备：指两台机器运行待命）。 一、Haproxy双机热备的实现思路 如果要实现两台Haproxy的双机热备，那么关键点是linux的虚拟i...
通过Haproxy实现PXC集群负载均衡
zhanglei_16的博客
06-19 2710
通过Haproxy来实现PXC数据库集群的读写负载均衡问题，在PXC集群之外再设置一台Haproxy代理服务器， 所有应用程序对于数据库集群的读写操作都发给这台代理服务器，再由Haproxy决定某个读写操作具体 发给集群中的那台数据库服务器。 PXC集群安装可以参考http://blog.youkuaiyun.com/zhanglei_16/article/details/51473538 1：安
docker搭建pxc集群与haproxy负载均衡
FlyDevon的博客
09-02 1809
Percona XtraDB Cluster简称PXC。Percona Xtradb Cluster实现是在原mysql代码上通过Galera包将不同的mysql实例连接起来，实现了multi-master的集群架构。 1、安装pxc镜像 docker pull percona/percona-xtradb-cluster 2、修改镜像名称 docker tag percona/per...
docker搭建mysql高可用集群
weixin_45444042的博客
01-01 1050
docker中搭建mysql高可用集群-percona-xtradb-cluster *percona-xtradb-cluster是一款很棒的mysql高可用集群解决方案。 特点是每个节点都能进行读写且都保存全量的数据。也就是说在任何一个节点进行写入操作，都会同步给其它所有节点写入到自己的磁盘。 Mysql pxc中任何一台机器挂了，集群照常运转，因为节点间并不共享磁盘。 3.推荐percona-xtradb-cluster 3个节点 首先你要先有一个docker（自行安装） 开始操作：
MySQL数据库集群之PXC方案---Haproxy+PXC集群
盲流子的博客
07-18 2320
在之前的博客中我们已经安装好了三个节点的PXC集群。在这一篇博客中讲解Haproxy与PXC集群的搭配使用。 1. Haproxy简介 HaProxy是一个特别适用于高可用性环境的TCP/HTTP开源的反向代理和负载均衡软件。在七层负载均衡方面的功能很强大（支持cookie track，header rewrite等等），支持双机热备，支持虚拟主机，支持健康检查，同时还提供直观的监控页面，可以清晰...
以两台Linux主机在docker中实现mysql主主备份以用nginx实现mysql高可用
weixin_30415113的博客
01-25 199
使用nginx反向代理主主备份的两台mysql，连接时连接nginx，当其中一台myql停止后，仍然可以正常使用，如果使用k8s 会简单许多。所谓主主复制就是在主从复制的基础上掉了个头。 请博主买块糖吃吧： 打开支付宝首页搜“585262065”领红包，领到大红包的小伙伴赶紧使用哦！ 装备了两台linux主机 在两台主机上均安装了 docker 在两台主机的docker上均安...
docker简易搭建MySQL集群的负载均衡
王依米
10-17 634
https://blog.youkuaiyun.com/belonghuang157405/article/details/80883342 docker简易搭建MySQL集群的负载均衡 写在前面：为什么要搭建MySQL集群的负载均衡呢？在拥有集群的情况，如果始终都是对集群中的某个节点服务器进行数据库请求，仍然是会造成负载高，性能差。故使用harpoxy中间件进行负载均衡。 注：在阅读此文之前，最好请先阅读...
Centos通过Docker搭建MySQL的PXC集群
菜鸟路上的小白
09-01 475
PXC集群的简介 Percona XtraDB Cluster（下文简称PXC集群）提供了MySQL高可用的一种实现方法。PXC集群以节点组成（推荐至少3节点，便于故障恢复，后面会讨论两节点的情况），每个节点都是基于常规的 MySQL/Percona Server，意味着你可以从集群中分离出某节点单独使用。集群中每个节点都包含完整的数据。 在开篇之前我们先来了解一下为什么需要MySQL集群？PXC集群方案特点？PXC集群方案与Replication区别？让我们带着疑问开始我们的教程。 为什么需要MySQ
docker-compose实现自动化部署haproxy+pxc集群
yhn1992的博客
09-13 963
本文使用docker-compose + shell 实现 MySQL集群负载均衡 自动化部署 实现效果： 执行 sh install.sh 可以部署一个haproxy节点分发器+5个PXC mysql数据库节点，实现数据库负载均衡 总流程 （1）启动 pxc 容器集群 （2）启动 haproxy 容器 （3）向 pxc容器中添加 haproxy用户 总入口：/home/2.DockerProjs/2.haproxy+pxc/install.sh 目录说明： config...
基于centos系统部署haproxy+MySQL PXC集群
淡定波的博客
06-21 586
一、PXC 介绍 1、基于Galere协议的高可用方案：pxc Galera是Codership提供的多主数据同步复制机制，可以实现多个节点间的数据同步复制以及读写，并且可保障数据库的服务高可用及数据一致性。 基于Galera的高可用方案主要有MariaDB Galera Cluster和Percona XtraDB Cluster（简称PXC），目前PXC用的会比较多一些。 mariadb的集群原理跟PXC一样,maridb-cluster其实就是PXC，两者原理是一样的。 2、PXC 简介 pxc是一套
CentOS使用Docker搭建GitLab+Jenkins持续集成环境
"在CentOS操作系统中，使用Docker搭建GitLab和Jenkins的持续集成环境，涉及到的主要步骤包括调整虚拟机网络配置、安装Docker、安装GitLab以及配置相关服务。" 在CentOS系统中，为了实现使用Docker部署GitLab和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值