binlog2sql:MySQL数据恢复的利器
binlog2sqlParse MySQL binlog to SQL you want项目地址:https://gitcode.com/gh_mirrors/bi/binlog2sql
项目介绍
binlog2sql 是一款由Python编写的开源工具,专门用于从MySQL的binlog日志中解析出SQL语句。它能够根据不同的选项生成原始SQL、回滚SQL以及去除主键的INSERT SQL等,为数据库管理员提供了一个强大的数据恢复工具。
项目技术分析
binlog2sql的核心功能是解析MySQL的binlog文件,提取出其中的SQL操作记录。它支持多种解析模式,包括生成标准SQL、回滚SQL以及去除主键的INSERT SQL。此外,binlog2sql还提供了丰富的选项来控制解析的范围和对象,使得用户可以根据具体需求进行精细化的操作。
项目及技术应用场景
binlog2sql的应用场景非常广泛,主要包括:
- 数据快速回滚(闪回):在误操作导致数据丢失时,可以快速生成回滚SQL,恢复数据。
- 主从切换后新master丢数据的修复:在主从切换过程中,如果新master出现数据丢失,可以通过解析binlog来修复数据。
- 从binlog生成标准SQL,带来的衍生功能:例如,可以通过解析binlog来监控数据库的操作记录,或者进行数据审计等。
项目特点
binlog2sql具有以下显著特点:
- 纯Python开发:安装与使用都非常简单,无需复杂的配置。
- 自带flashback、no-primary-key解析模式:无需再装补丁,即可实现回滚和去除主键的功能。
- 解析为标准SQL:生成的SQL语句易于理解、筛选和执行。
- 代码易于改造:支持更多个性化解析,满足不同用户的需求。
- 活跃的社区支持:有任何问题,都可以通过社区获得帮助。
安装与使用
安装
shell> git clone https://github.com/danfengcao/binlog2sql.git && cd binlog2sql
shell> pip install -r requirements.txt
使用
MySQL server必须设置以下参数:
[mysqld]
server_id = 1
log_bin = /var/log/mysql/mysql-bin.log
max_binlog_size = 1G
binlog_format = row
binlog_row_image = full
user需要的最小权限集合:
GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO 'user'@'host';
基本用法
解析出标准SQL
shell> python binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -t test3 test4 --start-file='mysql-bin.000002'
解析出回滚SQL
shell> python binlog2sql.py --flashback -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttest3 --start-file='mysql-bin.000002' --start-position=763 --stop-position=1147
应用案例
误删整张表数据,需要紧急回滚
假设test库tbl表原有数据被误删除,可以通过以下步骤恢复数据:
-
查看当前的binlog文件:
mysql> show master status;
-
根据误操作时间过滤数据,定位误操作SQL的binlog位置:
shell> python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-datetime='2016-12-13 20:25:00' --stop-datetime='2016-12-13 20:30:00'
-
根据位置进一步过滤,使用flashback模式生成回滚SQL,检查回滚SQL是否正确:
shell> python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -
binlog2sqlParse MySQL binlog to SQL you want项目地址:https://gitcode.com/gh_mirrors/bi/binlog2sql
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考