Mycat+Mysql主从复制+haproxy+keepalived实现高可用的分库分表集群方案

最新推荐文章于 2025-06-07 17:48:18 发布

原创

最新推荐文章于 2025-06-07 17:48:18 发布 · 4k 阅读

20 ·

CC 4.0 BY-SA版权

一，部署架构

1.1架构图

这里写图片描述

1.2 软件版本

操作系统： CentOS2-7-X86_64-DVD-1708.iso
JDK 版本： jdk1.8.0_11
Keepalived 版本： keepalived-1.2.18.tar.gz
HAProxy 版本： haproxy-1.5.16.tar.gz
MyCat 版本： Mycat-server-1.4-release-20151019230038-linux.tar.gz
MySQL 版本： mysql-5.6.26.tar.gz

二，Mysql源码编译安装

2.1安装环境：

操作系统：CentOS2-7-x86_64-DVD-1708.iso
Mysql 版本：mysql-5.6.26.tar.gz

2.2源码安装mysql5.6.26

1) 使用下面的命令检查是否安装有 MySQL Server:

rpm -qa | grep mysql

mysql-libs-5.1.73-3.el6_5.x86_64
如果是 CentOS7 以上，请使用以下命令查看：

rpm -qa | grep mariadb

mariadb-libs-5.5.41-2.el7_0.x86_64
（因为没有 MySQL 服务，因此没必要卸载。 mysql-libs 是 MySQL 的必要包）
（如果有的话可通过下面的命令来卸载掉， rpm -e mysql //普通删除模式）

2) 改防火墙设置，打开 3306 端口：

vi /etc/sysconfig/iptables

增加如下行：

-A INPUT -p tcp -m state –state NEW -m tcp –dport 3306 -j ACCEPT

重启防火墙：

service iptables restart

3) 新增 mysql 用户组：

groupadd mysql

4) 新增 mysql 用户，并添加到 mysql 用户组：

useradd -r -g mysql mysql

5) 新建 MySQL 执行文件目录(后面会把编译好的 mysql 程序安装到这个目录)：

 mkdir -p /usr/local/mysql

6) 新建 MySQL 数据库数据文件目录：

mkdir -p /home/mysql/data
mkdir -p /home/mysql/logs
mkdir -p /home/mysql/temp

(注意：上面的 logs 及 temp 目录是为了以后将 MySQL 的数据文件与执行程序文件分离，如果打算设置到不同的路径，注意修改对应的执行命令和数据库初始化脚本）

7) 增加 PATH 环境变量搜索路径：

vi /etc/profile

在 profile 文件末尾增加两行
mysql env param

PATH=/usr/local/mysql/bin:/usr/local/mysql/lib:$PATH export PATH

使 PATH 搜索路径立即生效：

source /etc/profile

8) 安装编译 MySQL 需要的依赖包：

 yum install make cmake gcc gcc-c++ bison bison-devel ncurses ncurses-devel autoconf
automake

9) 进入/usr/local/src 目录，上传 mysql-5.6.26.tar.gz 源代码到/usr/local/src 目录：

# cd /usr/local/src

10) 开始编译安装 mysql-5.6.26

tar -zxvf mysql-5.6.26.tar.gz

进入解压缩源码目录：

# cd mysql-5.6.26

使用 cmake 源码安装 mysql（如果打算安装到不同的路径，注意修改下面语句中/usr/local/mysql 和/home/mysql/data 路径！）

# cmake \
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql \
-DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock \
-DDEFAULT_CHARSET=utf8 \
-DDEFAULT_COLLATION=utf8_general_ci \
-DWITH_MYISAM_STORAGE_ENGINE=1 \
-DWITH_INNOBASE_STORAGE_ENGINE=1 \
-DWITH_ARCHIVE_STORAGE_ENGINE=1 \
-DWITH_BLACKHOLE_STORAGE_ENGINE=1 \
-DWITH_MEMORY_STORAGE_ENGINE=1 \
-DWITH_READLINE=1 \
-DENABLED_LOCAL_INFILE=1 \
-DMYSQL_DATADIR=/home/mysql/data \
-DMYSQL_USER=mysql \
-DMYSQL_TCP_PORT=3306 \
-DENABLE_DOWNLOADS=1

上面的这些复制完，回车，然后就开始 cmake 的过程，一般时间不会很长
配置解释：
-DCMAKE_INSTALL_PREFIX=/usr/local/mysql 设置安装目录
-DMYSQL_DATADIR=/home/mysql/data 设置数据库存放目录
-DMYSQL_UNIX_ADDR=/usr/local/mysql/mysql.sock 设置 UNIX socket 目录
-DMYSQL_USER=mysql 设置运行用户
-DDEFAULT_CHARSET=utf8 设置默认字符集，默认 latin1
-DEFAULT_COLLATION=utf8_general_ci设置默认校对规则，默认 latin1_general_ci
-DWITH_INNOBASE_STORAGE_ENGINE=1 添加 InnoDB 引擎支持
-DENABLE_DOWNLOADS=1 自动下载可选文件，比如自动下载谷歌的测试包
-DMYSQL_TCP_PORT=3306 设置服务器监听端口，默认 3306
-DSYSCONFDIR=/etc 设置 my.cnf 所在目录，默认为安装目录）

执行过程中会出现：
CMake Error: Problem with tar_extract_all(): Invalid argument
Cmake Error:Problem extracting tar:/usr/local/src/mysql5.6.26/source_downloads/gmoc k-1.6.0.zip
解决方法：
cd mysql 目录下面会发现有一个 source_downloads 目录，需要解压 unzip gmock-1.6.0.zip,然后再重新执行上述配置过程。也可以去掉-DENABLE_DOWNLOADS=1 这个选项，不编译谷歌的测试包也没有什么问题，但是之前的某些版本会出现无法编译的问题

11) cmake 结束后开始编译源码，这一步时间会较长，请耐心等待：

# make

12) 安装编译好的程序：

# make install

（注意：如果需要重装 mysql，在/usr/local/src/mysql-5.6.26 在执行下 make install 就可以了，不需要再 cmake 和 make）

13) 清除安装临时文件：

# make clean

14) 修改 mysql 目录拥有者为 mysql 用户

# chown -Rf mysql:mysql /usr/local/mysql
# chown -Rf mysql:mysql /home/mysql

15) 进入 mysql 执行程序的安装路径：

# cd /usr/local/mysql

16) 执行初始化配置脚本，创建系统自带的数据库和表（注意：路径/home/mysql/data 需要换成自定定义的数据库存放路径）：

# scripts/mysql_install_db --user=mysql --basedir=/usr/local/mysql --datadir=/home/mysql/data

17) 初始化脚本在/usr/local/mysql/下生成了配置文件 my.cnf，需要更改该配置文件的所有者：

# chown -Rf mysql:mysql /etc/my.cnf

18) 编辑/etc/my.cnf（建议将配置文件放到此c处,相关参数酌情进行优化配置）

[client]

port = 3306
socket = /usr/local/mysql/mysql.sock
[mysqld]
character-set-server = utf8
collation-server = utf8_general_ci
log_bin_trust_function_creators=true
lower_case_table_names=1
skip-external-locking
skip-name-resolve
user = mysql
port = 3306
basedir = /usr/local/mysql
datadir = /home/mysql/data
tmpdir = /home/mysql/temp
# server_id = .....
socket = /usr/local/mysql/mysql.sock
log-error = /home/mysql/logs/mysql_error.log
pid-file = /home/mysql/mysql.pid
open_files_limit = 10240
back_log = 600
max_connections=500
max_connect_errors = 6000
wait_timeout=605800
#open_tables = 600
#table_cache = 650
#opened_tables = 630
max_allowed_packet = 32M
sort_buffer_size = 4M
join_buffer_size = 4M
thread_cache_size = 300query_cache_type = 1
query_cache_size = 256M
query_cache_limit = 2M
query_cache_min_res_unit = 16k
tmp_table_size = 256M
max_heap_table_size = 256M
key_buffer_size = 256M
read_buffer_size = 1M
read_rnd_buffer_size = 16M
bulk_insert_buffer_size = 64M
lower_case_table_names=1
default-storage-engine = INNODB
innodb_buffer_pool_size = 2G
innodb_log_buffer_size = 32M
innodb_log_file_size = 128M
innodb_flush_method = O_DIRECT
#####################
thread_concurrency = 32
long_query_time= 2
slow-query-log = on
slow-query-log-file = /home/mysql/logs/mysql-slow.log
[mysqldump]
quick
max_allowed_packet = 32M
[mysqld_safe]
log-error=/var/log/mysqld.log
pid-file=/var/run/mysqld/mysqld.pid

19）复制服务启动脚本：

# cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysql

20）启动mysql服务：

# service mysql start

Starting MySQL.. SUCCESS!

21）设置 MySQL 开机自动启动服务：

# chkconfig mysql on

22）设置 MySQL 数据库 root 用户的本地登录密码（初始用户没有密码）：

# mysqladmin -u root password ‘111111’

23）允许root用户远程连接（根据实际情况进行操作）

# mysql -uroot -p111111
mysql>GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '111111' WITH
GRANT OPTION;

mysql> flush privileges;
mysql> exit;

24）运行安全设置脚本（可选操作）

# /usr/local/mysql/bin/mysql_secure_installation
NOTE: RUNNING ALL PARTS OF THIS SCRIPT IS RECOMMENDED FOR ALL MySQL
SERVERS IN PRODUCTION USE! PLEASE READ EACH STEP CAREFULLY!
In order to log into MySQL to secure it, we'll need the current
password for the root user. If you've just installed MySQL, and
you haven't set the root password yet,