MySQL闪回工具之my2sql

最新推荐文章于 2025-09-12 13:42:07 发布
原创 最新推荐文章于 2025-09-12 13:42:07 发布 · 9.6k 阅读 · 14 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql #数据库 #github #golang #linux

my2sql是一个用Go语言编写的MySQL binlog解析工具，能够生成原始SQL、回滚SQL等，并提供DML统计信息。在误删数据时，它能帮助紧急回滚。使用时，binlog格式需为row且binlog_row_image=full。my2sql具备丰富的功能，包括回滚、DML统计等，并且解析速度较快。

my2sql

简介

go版MySQL binlog解析工具，通过解析MySQL binlog ，可以生成原始SQL、回滚SQL、去除主键的INSERT SQL等，也可以生成DML统计信息。https://github.com/liuhr/my2sql

安装

编译

git clone https://github.com/liuhr/my2sql.git
cd my2sql/
go build .

也可以直接下载Linux版编译好的可执行文件
https://github.com/liuhr/my2sql/blob/master/releases/my2sql

应用案例

误删整张表数据，需要紧急回滚

mysql> #数据库
mysql> show create database testdb\G
*************************** 1. row ***************************
       Database: testdb
Create Database: CREATE DATABASE `testdb` /*!40100 DEFAULT CHARACTER SET utf8mb4 */

mysql> #表结构
mysql> show create table student\G
*************************** 1. row ***************************
       Table: student
Create Table: CREATE TABLE `student` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `number` int(11) NOT NULL,
  `name` varchar(255) DEFAULT NULL,
  `add_time` timestamp NULL DEFAULT CURRENT_TIMESTAMP COMMENT '添加的时间',
  `content` json DEFAULT NULL,
  PRIMARY KEY (`id`),
  UNIQUE KEY `idx_name` (`number`,`name`)
) ENGINE=InnoDB AUTO_INCREMENT=1234 DEFAULT CHARSET=utf8

mysql> #数据
mysql> select * from student;
+------+--------+---------+---------------------+---------------------------------+
| id   | number | name    | add_time            | content                         |
+------+--------+---------+---------------------+---------------------------------+
|   12 |     12 | che     | 2020-07-06 19:39:17 | NULL                            |
| 1217 |     12 | hanraan | 2020-07-06 19:39:17 | NULL                            |
| 1218 |     12 | NULL    | 2020-07-06 19:39:17 | NULL                            |
| 1219 |     12 | hanran  | 2020-07-06 19:39:17 | NULL                            |
| 1221 |     13 | hanran  | 2020-07-06 19:40:10 | NULL                            |
| 1222 |     14 | hanran  | 2020-07-06 19:42:17 | NULL                            |
| 1223 |     15 | hanran  | 2020-07-06 21:55:48 | {"author": "liuhan"}            |
| 1224 |     16 | hanran  | 2020-07-06 21:55:48 | {"author": "liuhan"}            |
| 1226 |     17 | hanran  | 2020-07-06 21:55:48 | {"age": 13, "author": "liuhan"} |
| 1227 |     18 | hanran  | 2020-07-06 21:55:48 | {"age": 13, "author": "liuhan"} |
| 1229 |     20 | chenxi  | 2020-07-11 16:20:50 | NULL                            |
| 1231 |     21 | chenxi  | 2020-07-12 10:12:45 | NULL                            |
| 1232 |    134 | asdf    | 2020-07-12 11:08:41 | NULL                            |
| 1233 |     26 | ranran  | 2020-07-15 19:06:03 | NULL                            |
+------+--------+---------+---------------------+---------------------------------+

mysql> #为了方便演示，重新生成一个binlog
mysql> flush logs;

mysql> #删除表数据
mysql> delete from student;
Query OK, 14 rows affected (0.05 sec)

mysql> select * from student;
Empty set (0.00 sec)

查看binlog文件

mysql> show master status;
+------------------+----------+--------------+------------------+-------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
+------------------+----------+--------------+------------------+-------------------+
| mysql-bin.000045 |      837 |              |                  |                   |
+------------------+----------+--------------+------------------+-------------------+

根据操作时间解析binlog，生成回滚日志

./my2sql  -user root -password 123456  -port 3306 \
-host 127.0.0.1 -databases testdb  -tables student \
-work-type rollback   -start-file mysql-bin.000045 \
-start-datetime "2020-07-18 11:40:00" --stop-datetime "2020-07-18 12:00:00" \
-output-dir tmpdir/

查看生成的回滚SQL

cd tmpdir/
ls
biglong_trx.txt		binlog_status.txt	rollback.45.sql

#查看DML信息
cat binlog_status.txt
binlog            starttime           stoptime            startpos   stoppos    inserts  updates  deletes  database        table
mysql-bin.000045  2020-07-18_11:49:53 2020-07-18_11:49:53 293        806        0        0        14       testdb          student
#上面信息可以看到解析的binlog DML情况

#查看回滚SQL
cat rollback.45.sql
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1233,26,'ranran','2020-07-15 19:06:03',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1232,134,'asdf','2020-07-12 11:08:41',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1231,21,'chenxi','2020-07-12 10:12:45',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1229,20,'chenxi','2020-07-11 16:20:50',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1227,18,'hanran','2020-07-06 21:55:48','{\"age\":13,\"author\":\"liuhan\"}');
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1226,17,'hanran','2020-07-06 21:55:48','{\"age\":13,\"author\":\"liuhan\"}');
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1224,16,'hanran','2020-07-06 21:55:48','{\"author\":\"liuhan\"}');
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1223,15,'hanran','2020-07-06 21:55:48','{\"author\":\"liuhan\"}');
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1222,14,'hanran','2020-07-06 19:42:17',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1221,13,'hanran','2020-07-06 19:40:10',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1219,12,'hanran','2020-07-06 19:39:17',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1218,12,null,'2020-07-06 19:39:17',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (1217,12,'hanraan','2020-07-06 19:39:17',null);
INSERT INTO `testdb`.`student` (`id`,`number`,`name`,`add_time`,`content`) VALUES (12,12,'che','2020-07-06 19:39:17',null);

#应用回滚SQL恢复数据
mysql -u root -p123456 -P3306 -h127.0.0.1  testdb < tmpdir/rollback.45.sql
mysql> select * from student;
+------+--------+---------+---------------------+---------------------------------+
| id   | number | name    | add_time            | content                         |
+------+--------+---------+---------------------+---------------------------------+
|   12 |     12 | che     | 2020-07-06 19:39:17 | NULL                            |
| 1217 |     12 | hanraan | 2020-07-06 19:39:17 | NULL                            |
| 1218 |     12 | NULL    | 2020-07-06 19:39:17 | NULL                            |
| 1219 |     12 | hanran  | 2020-07-06 19:39:17 | NULL                            |
| 1221 |     13 | hanran  | 2020-07-06 19:40:10 | NULL                            |
| 1222 |     14 | hanran  | 2020-07-06 19:42:17 | NULL                            |
| 1223 |     15 | hanran  | 2020-07-06 21:55:48 | {"author": "liuhan"}            |
| 1224 |     16 | hanran  | 2020-07-06 21:55:48 | {"author": "liuhan"}            |
| 1226 |     17 | hanran  | 2020-07-06 21:55:48 | {"age": 13, "author": "liuhan"} |
| 1227 |     18 | hanran  | 2020-07-06 21:55:48 | {"age": 13, "author": "liuhan"} |
| 1229 |     20 | chenxi  | 2020-07-11 16:20:50 | NULL                            |
| 1231 |     21 | chenxi  | 2020-07-12 10:12:45 | NULL                            |
| 1232 |    134 | asdf    | 2020-07-12 11:08:41 | NULL                            |
| 1233 |     26 | ranran  | 2020-07-15 19:06:03 | NULL                            |
+------+--------+---------+---------------------+---------------------------------+
14 rows in set (0.00 sec)

根据POS点解析binlog，生成回滚日志
也可以根据binlog的pos点解析，这里不在展示
执行命令：

./my2sql  -user root -password 123456  -port 3306 \
-host 127.0.0.1 -databases testdb  -tables student \
-work-type rollback   -start-file mysql-bin.000045 \
-start-pos  4 -stop-file  mysql-bin.000045 -stop-pos  837 \
-output-dir tmpdir/
总结
限制
  • 使用回滚/闪回功能时，binlog格式必须为row,且binlog_row_image=full， DML统计以及大事务分析不受影响
    只能回滚DML， 不能回滚DDL
  • 支持指定-tl时区来解释binlog中time/datetime字段的内容。开始时间-start-datetime与结束时间-stop-datetime也会使用此指定的时区， 但注意此开始与结束时间针对的是binlog event header中保存的unix timestamp。结果中的额外的datetime时间信息都是binlog event header中的unix timestamp
  • 此工具是伪装成从库拉取binlog，需要连接数据库的用户有SELECT, REPLICATION SLAVE, REPLICATION CLIENT权限
优点
  • 功能丰富，不仅支持回滚操作，还有其他实用功能。请参考之前博文
  • 基于golang实现，速度快，全量解析1.1Gbinlog只需要1分30秒左右，当前其他类似开源工具一般要几十分钟
  • github地址 https://github.com/liuhr/my2sql (好使的话别忘记给个星哦😄)

my2sql功能介绍相关博文

MySQL binlog回滚/闪回、前滚、DML统计、长事务与大事务分析
https://blog.youkuaiyun.com/liuhanran/article/details/107425016

MySQL 解析binlog生成标准SQL工具之my2sql
https://blog.youkuaiyun.com/liuhanran/article/details/107427204

MySQL 解析binlog 统计DML、长事务与大事务分析工具之my2sql
https://blog.youkuaiyun.com/liuhanran/article/details/107427391

Mysql闪回工具(Flashback )-介绍以及使用
飘然渡沧海的博客
05-07 3126
mysql 背景：今天在操作数据库的时候直接修改了数据库字段，由于本人比较菜没有写where 语句，导致现网全部数据都被更新覆盖 这个时候当然是不能跑路的啊， 毕竟我是一个富有责任心的人 毕竟我是一个富有责任心的人 毕竟我是一个富有责任心的人.主要还是我会 之前我在看mysql45讲时候，作者已经说过通过使用binlog+row+Flashback 方式去恢复数据 这里一定要开启binlog和row模式，关于这个模式可以看下45讲内容 mysql 闪回工具具体可以分为 3类 patch 第一类是以pa
生产数据误删恢复之使用my2sql恢复delete误删数据
huanhuanzhou blog
10-18 668
MySQL误删数据不跑路，跟我来学恢复。
MySQL数据误删除的快速解决方法（MySQL闪回工具）
09-09
Binlog2sql是一个Python开发开源的MySQL Binlog解析工具，能够将Binlog解析为原始的SQL，也支持将Binlog解析为回滚的SQL，去除主键的INSERT SQL，是DBA和运维人员数据恢复好帮手，下面小编通过教程给大介绍MySQL数据误删除的快速解决方法，一起看看吧
MySQL开源闪回工具
01-15
MySQL开源的flashback工具，适用各种场合挽救误操作的数据，DBA必备，强力推荐。
使用my2sql进行mysql的binlog恢复数据
最新发布
东方客的博客
09-12 662
My2SQL是一款用于解析MySQL binlog的工具，支持生成原始SQL和回滚语句。安装时需下载对应版本并赋予执行权限。
mysql 闪回表工具
weixin_30594001的博客
12-17 163
use HTTP::Date qw(time2iso str2time time2iso time2isoz); use POSIX; my $SDATE = strftime("%Y-%m-%d",localtime()); if ( $#ARGV < 4 ){ print "please input like binglog-0001 '2013-07...
MySQL闪回工具—my2sql
t384061961的博客
04-19 1090
MySQL闪回工具—my2sql my2sql是使用go语言开发的MySQL binlog解析工具，通过解析MySQL binlog ，可以生成原始SQL、回滚SQL、去除主键的INSERT SQL等，也可以生成DML统计信息。类似工具有binlog2sql、MyFlash、my2fback等，本工具基于my2fback、binlog_rollback工具二次开发而来。 my2sql的GitHub地址：https://github.com/liuhr/my2sql 优点： 功能丰富，不仅支持回滚操作，还有
mysql闪回工具binlog2sql安装配置教程详解
09-08
【MySQL闪回工具binlog2sql详解】 MySQL的binlog2sql是一款强大的开源工具，它由Python编写，专门用于解析MySQL的二进制日志（binlog），将binlog转换为可读的原始SQL语句，甚至能生成回滚SQL，帮助DBA和运维人员在...
my2sql和binlog2sql解析工具
07-02
my2sql和binlog2sql解析工具是两款专门针对MySQL数据库的二进制日志(binlog)文件进行处理和分析的实用工具。它们能够从binlog中提取、查询和还原SQL语句，为数据库备份、数据恢复、增量数据同步以及数据迁移提供强...
最新版Mysql reverse_sql数据闪回工具超强详解，入手即用！！
qq_34692500的博客
03-19 1149
Mysql reverse_sql数据闪回工具。
binlog 解析工具——my2sql
翔云
05-25 1319
my2sql是一款基于 Go 语言开发的 MySQL binlog 解析工具，支持从二进制日志（binlog）中生成原始 SQL、回滚 SQL（闪回 SQL）、去除主键的 INSERT SQL 等，还能生成 DML 操作统计信息。数据快速回滚（闪回）：通过逆向解析 binlog 生成反向 SQL，恢复误删除或误修改的数据。主从数据一致性修复：主从切换后新主库数据丢失时，通过 binlog 恢复数据。生成标准 SQL 与统计信息：用于审计、数据迁移，或分析高频更新表、大事务及主从延迟问题。
my2sql —— go语言版binlog解析及闪回工具
Hehuyi_In的博客
03-20 4163
之前学习过python语言版binlog解析及闪回工具最近听同事介绍有了新的go语言版的my2sql。优点是不需要安装一大堆依赖包，直接可以安装使用，并且解析更高效，试用一下。
MySQL数据闪回工具
雪辉博客
06-07 1225
binlog2sql安装及基本使用binlog2sql是什么安装binlog2sqlbinlog2sql安装包及依赖包安装步骤binlog2sql优缺点优点缺点binlog2sql使用要求及命令使用要求基本用法命令选项解析模式解析范围控制对象过滤注意点 binlog2sql是什么 binlog2sql大众点评开源的一个 MySQL 闪回工具。可以解析SQL并生成回滚SQL。 安装binlog2sq...
MyFlash MySQL闪回工具
weixin_40581617的博客
07-26 415
原理介绍请看美团官方博客：      https://tech.meituan.com/MySQL_flashback%E4%BB%8E%E5%8E%9F%E7%90%86%E5%88%B0%E5%AE%9E%E6%88%98.html   安装： 环境要求： 1、binlog格式必须为row，且binlog_row_image=full 2、仅支持5.6与5.7 3、只能回滚DML...
MySQL数据闪回工具--MyFlash
leonpenn的博客 *你本如虎，正当添翼*
01-08 750
背景： 源于美团点评。 增强版binlog2sql，拥有更快的恢复速度以及更灵活便捷的过滤方式。 基于binlog中记录的前后镜像实现，故依赖于以下两个参数： binlog_format=ROW binlog_row_image=FULL 一、安装 yum install gcc yum install glib2-devel cd /usr/local/ git clo...
mysql--my2sql 详解
zll4859291的博客
03-23 2738
从解析效率对比来看，my2sql 是优胜于 binlog2sql 的，并且 my2sql 另外还具有解析大事务或者长事务，生成 DML 统计信息的功能，是很实用一款 binlog 解析工具，但是通过实验来看，my2sql 的并发功能似乎并没有加快其解析效率，建议解析时使用默认的线程数即可。my2sql 工具在使用时需要注意下字段的数据类型，存在解析 bug ，会导致解析的数据与原数据有差异，具体参考：​ ​https://github.com/liuhr/my2sql/issues/31​​。
MySql开源闪回工具MyFlash —— 筑梦之路
筑梦之路
05-10 1695
MyFlash是由美团点评公司技术工程部开发维护的一个回滚DML操作的工具。该工具通过解析v4版本的binlog，完成回滚操作。相对已有的回滚工具，其增加了更多的过滤选项，让回滚更加容易。
mysql闪回脚本_mysql 闪回表工具
weixin_36358217的博客
01-28 342
use HTTP::Date qw(time2iso str2time time2iso time2isoz);use POSIX;my $SDATE = strftime("%Y-%m-%d",localtime());if ( $#ARGV < 4 ){print "please input like binglog-0001 '2013-07-01 00:00:00' '2013-...
Go语言开发的MySQL binlog解析工具my2sql高效执行
总结来说，my2sql是一个在CentOS 7.x操作系统上使用Go语言开发的程序，它的功能是解析MySQL的binlog日志文件，并提供生成标准SQL语句以及回退SQL语句的功能，使得数据库的操作和维护更加高效和安全。
评论 4
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值