mysql主从同步切换导致数据经常丢失问题解决

最新推荐文章于 2025-03-26 23:27:20 发布
原创 最新推荐文章于 2025-03-26 23:27:20 发布 · 5.6k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql

本文探讨了在MySQL主从复制环境中，通过设置innodb_flush_log_at_trx_commit和sync_binlog参数为1，来增强数据一致性和持久性的实践。在主从切换过程中，若从库未设置这些参数，可能导致数据丢失。文章强调了正确配置的重要性。

mysql主库设置了innodb_flush_log_at_trx_commit=1 and sync_binlog=1 参数保证了其一致性

切主从库的时候，之前的从库没有如上的两个参数导致现在的主从经常丢一部分数据。

所以加上之后就恢复了。

在使用InnoDB和事务的复制设置中获得最大的持久性和一致性，需在mysql配置文件中


 

innodb_flush_log_at_trx_commit=1

sync_binlog=1

 

官方说明：

https://dev.mysql.com/doc/refman/5.6/en/replication-problems.html

重定向丢失hash值_[转]故障分析 | 记一次 MySQL 主从双写导致的数据丢失问题
weixin_33364134的博客
01-23 433
作者：戴骏贤网易游戏 技术部资深数据库系统工程师。本文来源：原创投稿 *爱可生开源社区出品，原创内容未经授权不得随意使用，转载请联系小编并注明来源。一、问题起源不久前用户反馈部门的 MySQL 数据库发生了数据更新丢失。为了解决这个问题，当时对用户使用的场景进行了分析。发现可能是因为用户在两台互为主从的机器上都进行了写入导致的数据丢失。如图所示，是正常和异常情况下应用写入数据库的示例。随...
故障案例：高可用切换后数据不一致，旧主库数据丢失
cug_jiang126com的专栏
12-27 1208
故障现象： 有台物理机宕机，复制架构是master-master+半同步，期间触发了高可用容灾切换，后台显示成功切换到了备库。但是等旧主库起来后，主从状态正常，但是旧主库上却丢失了一部分数据，通过对比发现这些数据都是在宕机瞬间的写操作 原因分析： 1 假设旧主库A丢失的数据记录为X，我们去A上解析发现宕机那段时间并无X记录的binlog信息，可确定在宕机瞬间该记录X没有binlog落盘；
python 提取固定列名数据_python获取数据库列名
weixin_39806288的博客
12-01 6155
{"moduleinfo":{"card_count":[{"count_phone":1,"count":1}],"search_count":[{"count_phone":4,"count":4}]},"card":[{"des":"阿里云数据库专家保驾护航，为用户的数据库应用系统进行性能和风险评估，参与配合进行数据压测演练，提供数据库优化方面专业建议，在业务高峰期与用户共同保障数据库系统平...
mysql 互为主备 宕机 数据丢失_MySQL主从数据库配置和常见问题
weixin_39703773的博客
12-20 420
本篇主要介绍MySQL的主从数据配置方法。公司运维能力不是太好，数据库最近出了一次问题，导致丢失了一天的数据，并且某个服务宕机一晚上。为了避免再次出现类似问题，我决定添加一个Slave服务器，以避免数据丢失和服务宕机的问题。MySQL本身就提供了主从备份方式，下面介绍配置方法。1. 环境说明两台服务器，系统均为CentOS7系统，MySQL版本均为5.7及以上，保证从库版本与主库版本相同，或者高于...
redis面试：哨兵模式主从切换数据丢失问题
OceanStar的博客
10-17 1434
会产生数据丢失的场景 异步复制导致的数据丢失 因为主节点–> 从节点的复制是异步的，所以可能有部分数据还没有复制到从节点，主节点就宕机了，此时主节点中的数据和从节点中的数据不同步，即数据丢失。 脑裂导致数据丢失 什么是脑类 当某个主节点所在的机器突然脱离正常的网络，不能与其他的从节点连接，但实际上主节点还在运行着，这时候哨兵就会认为主节点宕机了，然后开启选举，将其他的从节点推举为新节点，这时候集群中就会出现两个主机，这种现象就是脑裂 脑裂引发的数据丢失问题 当一个从节点被推举为新的主节点时，但此时的客
Mysql主从同步的实现原理
09-09
MySQL主从同步是一种常见的数据库复制策略，用于提升系统的可扩展性、容错性和数据安全性。在主从同步架构中，数据库操作首先在主（master）服务器执行，然后将这些操作实时地复制到从（slave）服务器，确保数据的...
[问题收集]mysql主从分离过程中，数据不同步可能导致的后果以及应对策略
最新发布
Code Captain的专栏
03-26 1470
鉴于之前发表过mysql的主从分离的文章，但这几天发现还是需要把后果进行分类，为鉴别与定位问题提供依据，有需求的同学请自取，还有我未覆盖的，请随时告知，我也做整理收集，共同成长。
MySQL5.6主从复制(mysql数据同步配置)
09-09
MySQL5.6主从复制是一种常见的数据库高可用性和负载均衡解决方案，它允许数据从一个主服务器（Master）实时同步到一个或多个从服务器（Slave）。这种配置使得从服务器能够处理只读查询，减轻主服务器的压力，同时...
MySql 主从同步介绍
m0_67322837的博客
09-07 794
MySQL 主从同步，即 MySQL Replication，可以实现将数据从一台数据库服务器同步到多台数据库服务器。MySQL 数据库自带主从同步功能，经过配置，可以实现基于库、表结构的多种方案的主从同步。Redis 是一种高性能的内存数据库，但不是今天的主角；MySQL 是基于磁盘文件的关系型数据库，相比于 Redis 来说，读取速度会慢一些，但是功能强大，可以用于存储持久化的数据。
MySQL日志梳理 & MySQL主从同步原理
weixin_53622554的博客
10-10 369
MySQL 5.7：MTS - 并行复制原理。
Mysql丢数据及主从数据不一致的场景
lgxzzz的博客
12-21 635
随着对MySQL的学习，发现了MySQL的很多问题，最重要的就是丢数据的问题。对于丢数据问题，我们应该了解丢数据的场景，这样在以后的学习中多考虑如何去避免及解决这些问题。 1.MySQL数据库层丢数据场景   本节我们主要介绍一下在存储引擎层上是如何会丢数据的。 1.1.InnoDB丢数据   InnoDB支持事务，同Oracle类似，事务提交需要写redo、undo。采用日志先行的策略，将数据的变更在内存中完成，并且将事务记录成redo，顺序的写入redo日志中，即表示该事务已经完成，就可以返回给
mysql 主从切换丢失数据_关于PostgreSQL同步复制下主从切换时的数据丢失问题
weixin_36018494的博客
02-01 359
[root@node73 ~]# ps -ef|grep postgresroot 1228 25775 0 14:09 pts/2 00:00:00 su - postgrespostgres 1229 1228 0 14:09 pts/2 00:00:00 -bashpostgres 3339 31673 17 14:10 ? 00:00:07 p...
主从同步错误导致大量数据丢失, 修复全部数据的方法(万能方法).
苏暴击的博客
09-23 2167
主从同步很多时候会因为从库设置没有跳过错误而卡停或者其他原因, 导致同步数据丢失. 实际生产中常常有人会直接停到掉从库二进制日志功能, 再手动去添加最新的主库Position值和MASTER_LOG_FILE值. 但是人为判断,还是会损失掉部分数据. 如果涉及到多表时, 就很难恢复. 其实,修复全部数据的方法是 : 重新跑动最新的备份,更改从库拿到最新binlog日志值,这样就可以了...
mysql 主主同步丢数据_MySQL数据库丢失数据场景分析
weixin_39804641的博客
02-27 825
在线QQ客服：1922638专业的SQL Server、MySQL数据库同步软件同Oracl近似，事务提交时需要写redoundologInnoDB采用预写日志(WriteA headLog战略，数据页的变更会首先在内存中完成，同时将事务把持顺序记实到redolog中。完成上述的把持后表示该事务已经实现，可以或许返回给操纵已提交的消息。但此时实际被更改的数据页还保存在内存中(称为脏页)并没有flu...
线上MySQL主从节点迁移实战：主节点无缝切换，数据零丢失的终极指南
qq_36652517的博客
01-16 1126
通过以上方案，可以确保在MySQL主节点迁移过程中，数据不丢失业务不受影响。作为系统运维工程师，必须严格按照步骤操作，并在每个阶段进行充分的验证和测试，以确保迁移的成功和系统的稳定性。
mysql 11306_记一次 MySQL 主从双写导致的数据丢失问题-爱可生
weixin_34911236的博客
01-19 139
如图 1-2 所示为故障具体过程的还原。从图中可以看出在第 3 步 DP 上的写入操作，在恢复 DA 到 DP 的同步之后，覆盖了第 4 步 DA 上的写入。因此导致了最终两台机器数据不一致，并且有一部分数据更新丢失。在这里相信读者都会有一个疑问， 在第 4 步之后数据变成了(id : 1 ,name : name4)，那么第 3 步操作的时候写入的语句是 update t20200709 set...
MySQL主从同步遇到的坑（多数据源切换）
果酱 の 博客
09-05 2072
question: （多数据源切换）测试环境neza 注册用户回调我们接口写app_member 表的时候,发现从库里面有数据，主库里面没有，后来发现是因为加了事物的原因，@Transactional。 写入时数据源切换有问题。==》解决将写库写死成master，读的时候切换多数据源。   网上搜了下可能导致主从不同步的原因，转载自：https://blog.youkuaiyun.com/skymouse2...
mysql集群 数据丢失_主从集群数据丢失解决思路（实例）
weixin_42518838的博客
01-19 1152
前言：主从复制做为MySQL的精髓， 它有两大困难：主从数据的延时与数据的不一致性。本文主要表达的内容是如何排查数据不一致性。针对数据不一致的排查处理，各位业界大佬们都有丰富的处理经验，我就不多哔哔。我今天来主要给大家介绍工作中碰到奇葩示例：由于一个极隐式的骚操作，导致从库丢失数据(数据丢失量在每天将近万条记录)！环境描述：业务环境：短时间内(几个月的时间)，业务蓬勃发展，客户量从一两万一下增加到...
mysql主从复制，导致主从数据不同步的原因和解决方法
weixin_45310179的博客
09-07 7503
一、主从不同步解决办法 先上Master库： mysql>show processlist; 查看下进程是否Sleep太多。发现很正常。 show master status; 也正常。 mysql> show master status; ±------------------±---------±-------------±-----------------------------...
MySQL主从同步：原理、问题与高效解决方案
"MySQL主从同步的原理、常见问题、解决方案及应用场景" MySQL主从同步是一种常见的数据冗余和高可用性策略，它允许数据在主数据库（Master）和从数据库（Slave）之间实时或近实时地复制。这种设计使得从库可以用于...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值