mysql5.7 开启增强半同步复制

本文详细介绍MySQL增强半同步复制的实现步骤,包括插件安装、参数配置及超时处理,通过实例演示如何在主从环境中正确配置和使用增强半同步复制。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

前提是主从异步复制环境要提前搭建好,然后再开启mysql增强半同步

环境:mysql5.7.26 主从异步复制早已部署好。

1.加载plugin插件

建议master和slave上全部执行(考虑到MHA的主从自动切换的环境)

在主库安装semisync_master.so和semisync_slave.so插件:

mysql> INSTALL PLUGIN rpl_semi_sync_master SONAME 'semisync_master.so';
mysql> INSTALL PLUGIN rpl_semi_sync_slave SONAME 'semisync_slave.so';

linux服务器上的master库执行:

root@localhost [(none)]>INSTALL PLUGIN rpl_semi_sync_master SONAME 'semisync_master.so';
Query OK, 0 rows affected (4.52 sec)
root@localhost [(none)]>INSTALL PLUGIN rpl_semi_sync_slave SONAME 'semisync_slave.so';
Query OK, 0 rows affected (0.07 sec)

linux服务器上的slave库执行:

root@localhost [(none)]>INSTALL PLUGIN rpl_semi_sync_master SONAME 'semisync_master.so';
ERROR 1125 (HY000): Function 'rpl_semi_sync_master' already exists
root@localhost [(none)]>INSTALL PLUGIN rpl_semi_sync_slave SONAME 'semisync_slave.so';
ERROR 1125 (HY000): Function 'rpl_semi_sync_slave' already exists
root@localhost [(none)]>

提示:slave上增强半同步的插件已经存在,所以报错。
原因:master上安装增强半同步的插件后自动同步到了slave库上

2.slave和master开启增强半同步参数

生产环境上建议先在slave库上的开启 增强半同步参数

set global rpl_semi_sync_slave_enabled =1;
stop  slave io_thread;start  slave io_thread;

此刻观察master的错误日志:提示开启了Semi-sync replication 复制

2019-06-16T20:31:28.923731+08:00 718 [Note] While initializing dump thread for slave with UUID <7659cf56-8e81-11e9-bcbd-842b2b5999d9>, found a zombie dump thread with the same UUID. Master is killing the zombie dump thread(717).
2019-06-16T20:31:28.923838+08:00 717 [Note] Stop asynchronous binlog_dump to slave (server_id: 113306)
2019-06-16T20:31:28.923951+08:00 718 [Note] Start binlog_dump to master_thread_id(718) slave_server(113306), pos(, 4)
2019-06-16T20:31:28.923984+08:00 718 [Note] Start semi-sync binlog_dump to slave (server_id: 113306), pos(, 4)
2019-06-16T20:31:29.189007+08:00 718 [Note] Semi-sync replication switched ON at (mysql-bin.000005, 852045921)

然后master上再开启增强半同步参数


set global rpl_semi_sync_master_enabled =1
set global rpl_semi_sync_master_timeout        =1000

3.MySQL官网配置方法

官方要求master和slave的/etc/my.cnf要开启下面的参数:

rpl_semi_sync_master_enabled        =1                             #    0
rpl_semi_sync_slave_enabled         =1                             #    0
rpl_semi_sync_master_timeout        =1000                          #    1000(1 second) 同步复制中由于网络原因导致复制时间超过1s后,增强半同步复制就变成了异步复制了
rpl_semi_sync_master_wait_for_slave_count=N
plugin_load_add                     =semisync_master.so            #
plugin_load_add                     =semisync_slave.so             #

重启master和slave数据库。

4.实际生产环境配置方法

当然实际操作中还是不建议把参数rpl_semi_sync_master_enabled 和rpl_semi_sync_slave_enabled 直接写入配置文件的。
原因:把参数加入my.cnf配置文件时,在slave库挂掉,重新开启slave库或者是slave库重启后,会自动开启增强半同步复制。
如果在slave库断开master库时间较长时,最好是先开启mysql异步复制,让slave库追赶上master库后,然后再开启增强半同步复制。这样不会拖垮master库。要是直接开启增强半同步复制是会拖垮主库的。
rpl_semi_sync_master_timeout =1000 ##1s 这个转化为异步复制的超时参数是可以写入配置文件的。

5.演示增强半同步超时被关闭

演示增强半同步复制超过设定的时间被关闭:

在master上设置超时时间

mysql> set global rpl_semi_sync_master_timeout=20000;  ##为20s

在slave上停止io_thread 线程

mysql> stop slave io_thread;

然后在master库上删除一个测试库来演示增强半同步关闭:

mysql> drop database test02;  ##删除test02库卡盾超时20s 才执行成功。
Query OK, 0 rows affected (20.00 sec)

在卡盾的20s期间,在master库上执行show proccesslist,发现这期间,master库一直在等待slave的 semi-sync 的ack的响应:

mysql>  show processlist;
+-----+-----------------+-----------+------+---------+--------+--------------------------------------+----------------------+
| Id  | User            | Host      | db   | Command | Time   | State                                | Info                 |
+-----+-----------------+-----------+------+---------+--------+--------------------------------------+----------------------+
|   1 | event_scheduler | localhost | NULL | Daemon  | 185099 | Waiting on empty queue               | NULL                 |
| 700 | root            | localhost | NULL | Query   |      3 | Waiting for semi-sync ACK from slave | drop database test02 |
| 703 | root            | localhost | NULL | Query   |      0 | starting                             | show processlist     |
| 709 | root            | localhost | NULL | Sleep   |    999 |                                      | NULL                 |
+-----+-----------------+-----------+------+---------+--------+--------------------------------------+----------------------+
4 rows in set (0.00 sec)

此时查看master库的错误日志关闭了增强半同步复制:

2019-06-16T18:58:38.249020+08:00 0 [ERROR] ./mysqld: Got an error reading communication packets      ###这个报错是slave库 stop  slave io_thread导致的
2019-06-16T18:59:14.870329+08:00 711 [ERROR] Semi-sync master failed on net_flush() before waiting for slave reply
2019-06-16T18:59:14.870409+08:00 711 [Note] Stop semi-sync binlog_dump to slave (server_id: 113306)
2019-06-16T18:59:14.870469+08:00 711 [Note] Aborted connection 711 to db: 'unconnected' user: 'rept' host: '192.168.0.11' (Found net error)
2019-06-16T18:59:34.870253+08:00 703 [Warning] Timeout waiting for reply of binlog (file: mysql-bin.000004, pos: 422036), semi-sync up to file mysql-bin.000004, position 421882.
2019-06-16T18:59:34.870298+08:00 703 [Note] Semi-sync replication switched OFF.

当超过master库上设定的20s超时时间后,增强半同步复制被关闭了。Waiting for semi-sync ACK from slave 消失

mysql>  show processlist;
+-----+-----------------+-----------+------+---------+--------+------------------------+------------------+
| Id  | User            | Host      | db   | Command | Time   | State                  | Info             |
+-----+-----------------+-----------+------+---------+--------+------------------------+------------------+
|   1 | event_scheduler | localhost | NULL | Daemon  | 185120 | Waiting on empty queue | NULL             |
| 700 | root            | localhost | NULL | Sleep   |      4 |                        | NULL             |
| 703 | root            | localhost | NULL | Query   |      0 | starting               | show processlist |
| 709 | root            | localhost | NULL | Sleep   |   1020 |                        | NULL             |
+-----+-----------------+-----------+------+---------+--------+------------------------+------------------+
4 rows in set (0.00 sec)

接着在master上删除test01库时不再出现卡盾,说明增强半同步复制已经被关闭了

mysql> drop database test01;
Query OK, 2 rows affected (0.00 sec)
此时在maser查看当前增强半同步复制中有几个slave client,发现已没有client链接

mysql> show global status like "Rpl_semi_sync_master_clients";
+------------------------------+-------+
| Variable_name                | Value |
+------------------------------+-------+
| Rpl_semi_sync_master_clients | 0     |
+------------------------------+-------+
1 row in set (0.01 sec)

在slave上开启 io_thread

mysql> start slave io_thread;
Query OK, 0 rows affected (0.00 sec)

查看master库上的错误日志:

2019-06-16T19:10:46.656964+08:00 713 [Note] Start binlog_dump to master_thread_id(713) slave_server(113306), pos(, 4)
2019-06-16T19:10:46.657003+08:00 713 [Note] Start semi-sync binlog_dump to slave (server_id: 113306), pos(, 4)
2019-06-16T19:10:46.670872+08:00 0 [Note] Semi-sync replication switched ON at (mysql-bin.000004, 422366)

提示增强半同步有开启了。

master 查看半同步链接状态新增了1个:

mysql> show global status like "Rpl_semi_sync_master_clients";
+------------------------------+-------+
| Variable_name                | Value |
+------------------------------+-------+
| Rpl_semi_sync_master_clients | 1     |
+------------------------------+-------+
1 row in set (0.00 sec)

mysql> 

6.观察master库错误日志的变化

6.1 slave库关闭io 线程,再关闭半同步复制,然后再开启 slave 的io_thread线程

mysql> stop slave io_thread;
Query OK, 0 rows affected (0.00 sec)

mysql> set global rpl_semi_sync_slave_enabled=0 ;
Query OK, 0 rows affected (0.00 sec)

mysql> start slave io_thread;
Query OK, 0 rows affected (0.00 sec)
mysql> 

此刻观察master库的错误日志:

2019-06-16T20:35:14.463978+08:00 0 [ERROR] ./mysqld: Got an error reading communication packets
2019-06-16T20:35:44.309080+08:00 719 [Note] While initializing dump thread for slave with UUID <7659cf56-8e81-11e9-bcbd-842b2b5999d9>, found a zombie dump thread with the same UUID. Master is killing the zombie dump thread(718).
2019-06-16T20:35:44.309252+08:00 718 [Note] Stop semi-sync binlog_dump to slave (server_id: 113306)
2019-06-16T20:35:44.309724+08:00 719 [Note] Start binlog_dump to master_thread_id(719) slave_server(113306), pos(, 4)
2019-06-16T20:35:44.309740+08:00 719 [Note] Start asynchronous binlog_dump to slave (server_id: 113306), pos(, 4)

6.2 slave库关闭io 线程,等待20s后然后再关闭半同步复制,然后再开启 slave 的io_thread线程

此刻观察master库的错误日志:

2019-06-16T20:39:18.806715+08:00 0 [ERROR] ./mysqld: Got an error reading communication packets

2019-06-16T20:39:58.854194+08:00 720 [Note] Stop semi-sync binlog_dump to slave (server_id: 113306)
2019-06-16T20:39:58.854305+08:00 720 [Note] Aborted connection 720 to db: 'unconnected' user: 'rept' host: '192.168.0.11' (failed on flush_net())

2019-06-16T20:41:06.636868+08:00 721 [Note] Start binlog_dump to master_thread_id(721) slave_server(113306), pos(, 4)
2019-06-16T20:41:06.636902+08:00 721 [Note] Start asynchronous binlog_dump to slave (server_id: 113306), pos(, 4)

发现6.1和6.2的错误日志还是有不同的地方的

7.案例

当线上运行的MySQL增强半同步复制架构中,当其中的一台slave库挂掉了应该如何正确重新添加到原先的增强半同步复制架构??

正确的做法如下:

1. 此2个参数rpl_semi_sync_master_enabled  和rpl_semi_sync_slave_enabled  不要直接写入到my.cnf配置文件开启。
2.在slave库上先 stop slave io_thread ;set global  rpl_semi_sync_slave_enabled=0 关闭此参数。然后start slave io_thread 或者start slave 开启异步复制,让slave库追赶上master库。
3.然后在slave库 set global  rpl_semi_sync_slave_enabled=1 ;stop  slave io_thread;start  slave  io_thread;

演示到此处,欢迎留言一起交流学习。

转载于:https://blog.51cto.com/wujianwei/2409754

### 如何在 MySQL 5.7 中启用半同步复制 #### 半同步复制概述 半同步复制是一种增强的主从复制模式,它通过确保事务至少被一个从节点接收到并写入 relay log 后才返回成功给客户端来提高数据一致性[^3]。 --- #### 前提条件 为了在 MySQL 5.7 中启用半同步复制,需满足以下前提条件: 1. **关闭系统防火墙或开放 MySQL 端口** 如果服务器启用了防火墙,则需要允许 MySQL 的通信端口(默认为 3306)。可以通过以下命令操作: ```bash # 查看防火墙状态 firewall-cmd --state # 关闭防火墙 systemctl stop firewalld.service # 禁止开机自启动 systemctl disable firewalld.service ``` 2. **MySQL 版本要求** 确保使用的 MySQL5.5 或更高版本。对于 MySQL 5.7,此功能已内置支持。 3. **动态加载插件的支持** 执行以下 SQL 查询确认 `have_dynamic_loading` 是否为 YES: ```sql SHOW VARIABLES LIKE 'have_dynamic_loading'; ``` 若结果不是 YES,则无法加载所需的半同步插件。 4. **主从复制环境已搭建完成** 主从复制应已完成配置,并能正常工作。建议不设置基于特定数据库的过滤规则(如忽略某些数据库),而是全量同步整个实例的数据。 --- #### 配置步骤 ##### 1. 安装半同步插件 在 Master 和 Slave 节点上分别执行以下命令以安装半同步插件: - 在 Master 上: ```sql INSTALL PLUGIN rpl_semi_sync_master SONAME 'semisync_master.so'; ``` - 在 Slave 上: ```sql INSTALL PLUGIN rpl_semi_sync_slave SONAME 'semisync_slave.so'; ``` 注意:如果使用的是 Windows 平台,SONAME 应替换为 `.dll` 文件名[^4]。 --- ##### 2. 修改 MySQL 配置文件 (`my.cnf`) 编辑 MySQL 的配置文件,在 `[mysqld]` 下添加以下参数: - 对于 Master: ```ini [mysqld] plugin-load="rpl_semi_sync_master=semisync_master.so" rpl_semi_sync_master_enabled=1 rpl_semi_sync_master_timeout=5000 ``` - 对于 Slave: ```ini [mysqld] plugin-load="rpl_semi_sync_slave=semisync_slave.so" rpl_semi_sync_slave_enabled=1 ``` 保存后重启 MySQL 服务使更改生效: ```bash systemctl restart mysqld ``` --- ##### 3. 验证半同步复制的状态 登录到 MySQL 控制台,运行以下查询验证半同步插件是否已启用: - 检查 Master 插件状态: ```sql SELECT @@GLOBAL.rpl_semi_sync_master_enabled; ``` - 检查 Slave 插件状态: ```sql SELECT @@GLOBAL.rpl_semi_sync_slave_enabled; ``` 两个值都应返回 `1` 表示已启用。 还可以通过以下命令观察当前的半同步复制情况: ```sql SHOW GLOBAL STATUS LIKE 'Rpl_semi_sync%'; ``` --- #### 注意事项 1. **超时机制** 参数 `rpl_semi_sync_master_timeout` 设置了等待从节点响应的时间上限,默认为 10 秒。可以根据实际需求调整该值。 2. **性能影响** 开启半同步复制可能会增加延迟,尤其是在网络状况不佳的情况下。因此,推荐仅在网络稳定且低延时环境中使用此项功能。 3. **日志管理** 使用二进制日志记录时可以指定哪些数据库参与同步或排除某些数据库。例如: ```ini binlog-do-db=test # 只同步 test 数据库 binlog-ignore-db=mysql # 排除 mysql 系统数据库 ``` --- ### 总结 以上方法提供了完整的 MySQL 5.7 半同步复制配置流程及其最佳实践。遵循这些步骤能够显著提升主从架构下的数据一致性和可靠性。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值