Last_SQL_Errno: 1062

本文介绍如何在MySQL主从复制过程中跳过引发错误的事务,通过设置sql_slave_skip_counter参数来实现。解释了该参数的真正含义及其在不同场景下的使用方法,包括如何设置和应用,以及其在维护主从库同步时的重要性。

Last_SQL_Errno: 1062:

Last_Error: Error 'Duplicate entry '212' for key 'PRIMARY'' on query. Default database: 'iuc'. Query: '/* insert com.gionee.iuc.entity.main.Module */ insert into security_module (description, dtype, name, parent_id, priority, sn, sysid, type, url) values ('', 'MENU', '评论管理', 198, 99, 'commentMng', 198, 'o', '/')'

在show slave status\G时,提示了如上的错误,并且:Slave_SQL_Running: No  、Seconds_Behind_Master: NULL(这个参数表示与主库的同步还有多少,如果与主库是同步的应该是0),这是因为主库那边有error,从库这边就application不了,有一个参数可以设置从库跳过这些错误:sql_slave_skip_counter,这个参数正常情况下设置为1不会出问题,表示跳过1个事务,如果在运行中的主从复制,sql_slave_skip_counter参数值是默认的0,这时候主库又有大量的报错,这个时候可以,先stop slave , 再

set global sql_slave_skip_counter=1;然后重新change master,不过master_log_pos要为主库的最新值,不能跟初始设置主从那样设为0,再启动slave,在show salve satatus就正常了,下次再遇到主库有大量错误的情况下是不是会一一跳过,就要看后续观察。以下是网上关于sql_slave_skip_counter的解释。



之前一直以为我们设置sql_slave_skip_counter=1时我们是跳过当前事务复制出错的日志,看完淘宝丁奇大师的blog后 顿时明白了其真正含义,以下为转载丁奇blog: http://dinglin.iteye.com/blog/1236330

背景知识1:

    在主从库维护中,有时候需要跳过某个无法执行的命令,需要在slave处于stop状态下,执行 set global sql_slave_skip_counter=N以跳过命令。常用的且不易用错的是N=1的情况,但N>1时,则不那么顾名思义,本文详细介绍N的意义,及使用注意事项。

 

    背景知识2:

    MySQL从库从主库上复制binlog文件内容到本地执行。在binlog上命令以event的形式存在,并非一个命令对应一个event。以一个insert语句为例(引擎InnoDB、binglog_format=statement), 在binlog中实际上有三个event,分别为begin\insert\commit 。 命令类型都是Query_log_event.

 

    而set global sql_slave_skip_counter=N的意思,即为在start slave时,从当前位置起,跳过N个event。每跳过一个event,则N--.

 

    与实际情况不符?

    看到这里有同学就会问,这是有问题的。如果当前的执行位置是某个insert语句开头,那使用 N=1实际上是从begin\insert\commit的第二个开始执行,这个insert语句还是不能被跳过?

    实际上这里还有两个策略:

    1、若N=1且当前event为BEGIN, 则N不变,跳过当前event继续。

    2、若N=1且当前event处于一个事务之内(BEGIN之后,COMMIT之前),则N不变,跳过当前event继续。

 

     说明:其实上面两个策略合起来就是一句话,当N=1时,会连续跳过若干个event,直到当前所在的事务结束。

    当然如果N>1,则每跳过一个event都要N--.

 

    命令举例:

    所以我们平时最常用的N=1的情况,都是下一个事务

    假设某个Pos之后执行如下命令( 引擎InnoDB、binglog_format=statement),

    insert into t values(x1);

    begin;

    insert into t values(x2);

    insert into t values(x3);

    commit;

   insert into t values(x4);

你的从库stop在Pos上,假设你要跳过前面几个命令直接执行插入x4的操作,则你的N设置为 4或5或6或7均可。(X1语句为3个event)

 

   其他说明:

   上面举例中都特别说明了在innodb引擎和statement模式下。其他情况区别如下:

   1、若引擎为myisam(等不支持事务的引擎),且在statement下,则binlog中不会有begin和commit,每个命令都是一个event;

   2、row模式的binlog里,一个insert语句实际上是两个event(Table_map_event和 Row_log_event), 计算时应与statement不同。

  3、在row模式下,不论引擎是否支持事务,一个insert语句都会加上BEGIN和commit,也即变成4个event。

  4、基于InnoDB引擎表的insert/delete/update操作都有显式样的BEGIN /COMMIT.

 

  上面举的这个例子中,若为row模式,则要直接执行X4语句需要设置的N为 5~10均可。

 

   小结:

   1、set global sql_slave_skip_counter=N中的N是指跳过N个event

   2、最好记的是N被设置为1时,效果跳过下一个事务

   3、跳过第N个event后,位置若刚好落在一个事务内部,则会跳过这整个事务

   4、一个insert/update/delete不一定只对应一个event,由引擎和日志格式决定

MySQL错误代码1062表示插入重复键值,当出现 “Coordinator stopped because there were error(s) in the worker(s). The most recent failure being: Worker 3 failed executing transaction” 这类错误时,可按以下方法解决: #### 检查并删除重复数据 在从库执行以下查询,确认重复数据是否存在: ```sql SELECT * FROM kk_control.control_site_venue_bet_statistics WHERE 产生重复键的列名 = '相关值'; ``` 若存在重复数据,使用`DELETE`语句删除: ```sql DELETE FROM kk_control.control_site_venue_bet_statistics WHERE 产生重复键的列名 = '相关值'; ``` #### 跳过错误事务 在从库停止复制,设置跳过计数器,然后重新启动复制: ```sql STOP SLAVE; SET GLOBAL SQL_SLAVE_SKIP_COUNTER = 1; START SLAVE; ``` #### 调整唯一键约束 若确定该重复数据是正常情况,可考虑调整表的唯一键约束。例如,移除或修改唯一键: ```sql -- 移除唯一键 ALTER TABLE kk_control.control_site_venue_bet_statistics DROP INDEX 唯一键名; -- 修改唯一键 ALTER TABLE kk_control.control_site_venue_bet_statistics DROP INDEX 唯一键名; ALTER TABLE kk_control.control_site_venue_bet_statistics ADD UNIQUE (column1, column2); ``` #### 重新初始化从库 若上述方法无法解决问题,可重新初始化从库。步骤如下: 1. 在主库创建备份: ```bash mysqldump -u root -p --all-databases --master-data=2 > backup.sql ``` 2. 在从库停止复制: ```sql STOP SLAVE; ``` 3. 清空从库数据: ```sql DROP DATABASE kk_control; CREATE DATABASE kk_control; ``` 4. 将主库备份恢复到从库: ```bash mysql -u root -p < backup.sql ``` 5. 配置从库复制: ```sql CHANGE MASTER TO MASTER_HOST='master_host', MASTER_USER='replication_user', MASTER_PASSWORD='replication_password', MASTER_LOG_FILE='mysql_bin.xxxxxx', MASTER_LOG_POS=xxxxxx; START SLAVE; ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值