mysql半同步复制机制

LTspice introduction - 2 LTspice的界面 LTspice的界面主要有两个:Schematic Capture和Waveform Viewer Schematic Capture 它主要是用来画电路图的,画完电路图之后,添加一些dot 命令同时选择一些仿真的参数,点击执行(Run)Waveform Viewer 如果你的仿真不是op point的话,一个都会打开它,在它里面你可以画图相应的图形。 有两种方式可以在Viewer 阅读详情

在mysql主从复制中,有一下几种复制的方法

异步复制(Asynchronous replication)
Mysql中默认的方式就是异步的,master在受到客户提交的请求后,马上返回结果,而slave中是否同步并处理是不会考虑的,所以这样的话,虽然效率高但是数据的完整性得不到保障,如果master down了,需要从slave中选举出一个master,如果master中提交的修改没有传到slave上,就会导致新的master有数据的缺失

全同步复制(Fully synchronous replication)
当master执行完一个请求时,所有的slave都同步以后才将结果返回给客户。很明显这样的话效率会非常的低下

为了更好的权衡效率和数据一致性,所以又有了半同步复制机制
半同步复制(Semisynchronous replication)
介于异步复制和全同步复制之间,主库在执行完客户端提交的事务后不是立刻返回给客户端,而是等待至少一个从库接收到并写到relay log中才返回给客户端。
主从复制的基本原理如下图
这里写图片描述
其中的log dumper线程用来给I/O线程来传送binlog(二进制日志),来达到更新从库完成同步的作用。
而半同步机制增加了一个ack,即是否成功收到事务的标志码。也就是dumper线程除了发送事务到slave,还承担了接收slave的ack工作。如果出现异常,没有收到ack,那么将自动降级为普通的复制,直到异常修复。
所以说半同步同样也存在问题,虽然相对于全同步与全异步有所折衷。
(1)异常发生后就变成了普通的复制,可以有效降低数据不一致的情况,但是也不是完全避免了。
(2)dumper线程中增加了一个ack,所以加大其工作量,所以效率必然会受到影响。
(3)在MySQL 5.5和5.6使用after_commit的模式下, 即如果slave 没有收到事务,也就是还没有写入到relay log 之前,网络出现异常或者不稳定,此时刚好master挂了,系统切换到从机,两边的数据就会出现不一致。 在此情况下,slave会少一个事务的数据。

在5.7的版本下推出了Loss-less Semi-Synchronous Replication架构
其中增加了rpl_semi_sync_master_wait_point参数
这个参数有两个值
1.AFTER_COMMIT(5.6默认值)
master将每个事务写入binlog ,传递到slave往relay log上写,同时主库提交事务。master等待slave 反馈收到relay log,只有收到ACK后master才将commit OK结果反馈给客户端。
**2.AFTER_SYNC(**5.7默认值)
master 将每个事务写入binlog , 传递到slave 刷新到磁盘(relay log)。master等待slave 反馈接收到relay log的ack之后,再提交事务并且返回commit OK结果给客户端。 即使主库crash,所有在主库上已经提交的事务都能保证已经同步到slave的relay log中。

半同步复制的安装部署

要想使用半同步复制,必须满足以下几个条件:

1. MySQL 5.5及以上版本

2. 变量have_dynamic_loading为YES

3. 异步复制已经存在

首先加载插件

因用户需执行INSTALL PLUGIN, SET GLOBAL, STOP SLAVE和START SLAVE操作,所以用户需有SUPER权限。

主:

mysql> INSTALL PLUGIN rpl_semi_sync_master SONAME ‘semisync_master.so’;

从:

mysql> INSTALL PLUGIN rpl_semi_sync_slave SONAME ‘semisync_slave.so’;

查看插件是否加载成功

有两种方式

  1. 1.
mysql> show plugins;

rpl_semi_sync_master       | ACTIVE   | REPLICATION        | semisync_master.so | GPL  
  1. 2.
mysql> SELECT PLUGIN_NAME, PLUGIN_STATUS FROM INFORMATION_SCHEMA.PLUGINS  WHERE PLUGIN_NAME LIKE '%semi%';
+----------------------+---------------+
| PLUGIN_NAME          | PLUGIN_STATUS |
+----------------------+---------------+
| rpl_semi_sync_master | ACTIVE        |
+----------------------+---------------+
1 row in set (0.00 sec)

启动半同步复制

在安装完插件后,半同步复制默认是关闭的,这时需设置参数来开启半同步

主:

mysql> SET GLOBAL rpl_semi_sync_master_enabled = 1;

从:

mysql> SET GLOBAL rpl_semi_sync_slave_enabled = 1;

以上的启动方式是在命令行操作,也可写在配置文件中。

主:

plugin-load=rpl_semi_sync_master=semisync_master.so
rpl_semi_sync_master_enabled=1

从:

plugin-load=rpl_semi_sync_slave=semisync_slave.so
rpl_semi_sync_slave_enabled=1

在有的高可用架构下,master和slave需同时启动,以便在切换后能继续使用半同步复制

plugin-load = "rpl_semi_sync_master=semisync_master.so;rpl_semi_sync_slave=semisync_slave.so"
rpl-semi-sync-master-enabled = 1
rpl-semi-sync-slave-enabled = 1

重启从上的IO线程

mysql> STOP SLAVE IO_THREAD;

mysql> START SLAVE IO_THREAD;

如果没有重启,则默认还是异步复制,重启后,slave会在master上注册为半同步复制的slave角色。

查看半同步是否在运行

主:

mysql> show status like 'Rpl_semi_sync_master_status';

+-----------------------------+-------+
| Variable_name               | Value |
+-----------------------------+-------+
| Rpl_semi_sync_master_status | ON    |
+-----------------------------+-------+
1 row in set (0.00 sec)

从:

mysql> show status like 'Rpl_semi_sync_slave_status';

+----------------------------+-------+
| Variable_name              | Value |
+----------------------------+-------+
| Rpl_semi_sync_slave_status | ON    |
+----------------------------+-------+
1 row in set (0.20 sec)

这两个变量常用来监控主从是否运行在半同步复制模式下。

Transformer实战(33)——高效自注意力机制 在本节中,我们学习了如何在硬件资源受限的情况下减轻运行大模型的负担,介绍了高效的稀疏 Transformer 模型,通过近似技术(如 Linformer、BigBird 和 Performer) 用稀疏矩阵替代全自注意力矩阵。并观察它们在各种基准测试中的表现,例如计算复杂度和内存复杂度。结果表明,这些方法可以在不牺牲性能的情况下将平方级复杂度降低到线性复杂度。 阅读详情

相关推荐

手把手教你用二茂铁催化剂搞定醇的动力学拆分(保姆级实验避坑指南)

本文详细介绍了使用平面手性二茂铁催化剂进行醇的动力学拆分的全流程,包括催化剂选择与制备、反应体系搭建与条件优化、实时监测与反应淬灭、产物分离与纯化等关键步骤。通过实战案例和避坑指南,帮助实验人员实现>98% ee的拆分效果,特别适合需要高光学纯度二级芳基醇或烯丙醇的研究者。

weixin_30500105的博客 440

MySQL半同步复制

源不等待所有副本确认接收,它只需要来自副本的确认,而不是事件已在副本端完全执行并提交。但是请注意,在这种情况下,源无法重新启动并且必须被丢弃,因为它的二进制日志可能包含未提交的事务,在二进制日志恢复后外部化时会导致与副本冲突。在继续之前,源必须在每个事务中接收的副本确认数。使用AFTER_SYNC,所有客户端同时看到提交的事务在它被副本确认并提交到源上的存储引擎之后。如果出现问题导致副本无法处理事务,那么在意外的源退出和故障转移到副本的情况下,这些客户端可能会看到与他们在源上看到的数据相关的数据丢失。...

intqao的博客 3144

存内计算路线再获加持,清华存内芯片登Science

通过这种方法,可以比较有效的控制二氧化铪忆阻层中的微观变化,以及内部的温度和电场,使得器件具有非常优异的电学特性,而且可以在工厂里大规模生产,推动了高性能忆阻器阵列的诞生。团队搭建了全硬件构成的完整存算一体系统,如下图7所示,在系统里集成了多个忆阻器阵列,并在该系统上高效运行了卷积神经网络算法,成功验证了图像识别功能,证明了存算一体架构全硬件实现的可行性,并且成功实现了以更小的功耗和更低的硬件成本完成复杂的计算[6]。根据测试,在一般神经网络中权重更新的最后阶段,调整步长非常接近0,如图9(C)所示,

PXX12345678的博客 1558

mysql半同步降级_MySQL半同步复制

半同步复制简介MySQL复制默认情况下是异步的,主库将事件写入binlog并不管从库是否接受并处理它们,如果主库崩溃时,已提交的事务可能没有被传送到从库,因此主从切换可能导致数据丢失。Semisynchronous Replication(半同步复制)则一定程度上保证提交的事务已经传给了至少一个备库。半同步复制中,仅仅保证事务的已经传递到备库上,但是并不确保已经在备库上执行完成了。半同步复制确实有...

weixin_36371504的博客 1155

从零开始学版图(二)-----------差分放大电路

从零开始学版图

m0_56112720的博客 8566

利用eds editor生成CANOPEN 设备eds文件

通过以上步骤,您可以根据实际设备的功能特性,自动生成一份符合CANopen协议标准的电子数据表(EDS文件),该文件可以被上位机软件或其他CANopen主站设备用于识别、配置和控制您的CANopen从站设备。使用CANopen EDS Editor生成CANOPEN设备的EDS文件是一个系统化的过程,它涉及将设备的具体技术参数和功能映射到CANopen规范定义的对象字典中。

weixin_38604759的博客 6463

mysql半同步复制&组复制&全同步机制

先配置好主从 配置主从详见上一篇博客,这里只是简单过一边 mysql> grant replication slave on *.* to 'haha'@'172.25.53.%' identified by 'YaoJing...123@'; Query OK, 0 rows affected, 1 warning (0.00 sec) Server2链接server1 mysq...

awoyaoc的博客 9548

Windows下QT5.15.2安装MQTT模块全攻略(附分支选择避坑指南)

本文详细介绍了在Windows环境下为QT5.15.2安装MQTT模块的完整流程,包括环境准备、源码获取、编译配置及项目集成等关键步骤。特别针对分支选择、依赖项处理和常见错误提供了实用解决方案,帮助开发者高效完成MQTT模块的安装与调试,适用于物联网开发场景。

weixin_29224589的博客 466

Mysql半同步机制

  mysql5.5之后引入的半同步机制。   默认的异步同步是 主服务器把binlog扔到从服务器后就不管了 不管从服务器是否接受到。   半同步是 至少有一台从服务器接受到主服务器binlog日志并且应用到自己的relaylog中,然后给主服务器反馈 告诉已接受完毕  ,这时主服务器才返回给当前session操作完成。  当超时(rpl-semi-sync-master-timeo...

翔之天空的专栏 1069

【异常】OpenClaw 连接异常This site can‘t be reached 127.0.0.1 refused to connect Try: Checking the proxy

在访问OpenClaw相关服务时,浏览器提示如下异常信息,无法正常加载页面:Try:补充说明:该报错仅出现于本地访问场景(127.0.0.1为本地回环地址),涉及OpenClaw核心服务的本地连接交互,无外部网络及敏感信息泄露风险。

奶爸的编程之路,也就一周冷个三天 1486

DC/DC开关电源学习笔记(一)开关电源技术概述

开关模式电源(Switch Mode Power Supply,简称SMPS),又称交换式电源、开关变换器,是一种高频化电能转换装置,是电源供应器的一种。其功能是将一个位准的电压,透过不同形式的架构转换为用户端所需求的电压或电流。开关电源的输入多半是交流电源(例如市电)或是直流电源,而输出多半是需要直流电源的设备,例如个人电脑,而开关电源就进行两者之间电压及电流的转换。【百度百科】

小幽余生不加糖 1624

Mysql主从复制&半同步复制原理

一、Mysql主从复制原理 MySQL主从复制实则是一个异步复制的过程。经历了三个线程:主库和从库上的I/O线程,SQL线程。 MySQL的主从复制,实际上Slave端获取到Master端binlog日志(记录了SQL数据操作,增删添,不记录查询语句),将信息存放到relay中触发SQL线程进行还原的一个过程。 主从复制要点: 主库开启binlog 主库建立用户,给从库授权认...

Vincent's tech blog 6485

【DRAM存储器五十一】LPDDR5介绍--DFE与Pre-Emphasis

简述LPDDR5的DFE和预加重应用设置

highman110的博客 712

MySQL主从复制:半同步复制机制介绍

半同步复制是 MySQL 中一种重要的复制机制,它通过等待至少一个从服务器的确认来提高数据的一致性。虽然它可能会引入一些性能开销和潜在问题,但对于需要高数据完整性的应用场景来说,半同步复制是一个非常有价值的特性。通过合理配置和监控,可以确保半同步复制在提高数据安全性的同时,也能保持良好的性能表现。

学亮编程手记 636

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

mysql5.5半同步复制机制

mysql5.5版本开始系统提供半同步复制机制,就是用来保障主从之间数据同步的及时性。在半同步机制下,master节点只要确认有至少一个slave节点接收到了事务,即向发起请求的客户端返回操作成功的信息。 查看当前系统安装的所有插件: mysql>show plugins; 查看m...

chenxun1522的博客 124

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

mysql 5.5半同步复制_mysql5.5半同步复制机制

mysql5.5版本开始系统提供半同步复制机制,就是用来保障主从之间数据同步的及时性。在半同步机制下,master节点只要确认有至少一个slave节点接收到了事务,即向发起请求的客户端返回操作成功的信息。查看当前系统安装的所有插件:mysql>show plugins;查看mysql插件目录:mysql>show variables like 'plugin_dir';半同步插件共有两...

weixin_39723920的博客 173

详解mysql复制机制--异步复制,半同步复制和并行复制

详解MySQL复制机制--异步复制,半同步复制和并行复制 **# 异步复制 异步复制是MySQL自带的最原始的复制方式,主库和备库成功建立复制关系后,在备库上会有一个IO线程去主库拉取binlog,并将binlogx到本地,就是下图中Relaylog,然后备库会开启另外一个SQL线程取回放Relay log,通过这种方式达到Master-Slave数据同步的目的。 通常情况下,slave是只...

weixin_34218579的博客 385

mysql 同步复制 异步复制_详解mysql复制机制--异步复制,半同步复制和并行复制...

详解MySQL复制机制--异步复制,半同步复制和并行复制**# 异步复制异步复制是MySQL自带的最原始的复制方式,主库和备库成功建立复制关系后,在备库上会有一个IO线程去主库拉取binlog,并将binlogx到本地,就是下图中Relaylog,然后备库会开启另外一个SQL线程取回放Relay log,通过这种方式达到Master-Slave数据同步的目的。通常情况下,slave是只读的,可以...

weixin_36478445的博客 300

串行和并行的区别_详解mysql复制机制--异步复制,半同步复制和并行复制

概述今天主要聊下mysql复制,复制对于mysql的重要性不言而喻,mysql集群的负载均衡,读写分离和高可用都是基于复制实现。下面主要介绍下mysql的异步复制,半同步复制和并行复制。异步复制异步复制是mysql自带的最原始的复制方式,主库和备库成功建立起复制关系后,在备库上会有一个IO线程去主库拉取binlog,并将binlog写到本地,就是下图中的Relay log,然后备库会开启另外一个S...

weixin_39983383的博客 401

mysql半同步复制

1、理解半同步复制 ​ 到现在为止,我们已经可以搭建MySQL的主从集群,互主集群,但是我们这个集群有一个隐患,就是有可能会丢数据。这是为什么呢?这要从MySQL主从数据复制分析起。 ​ MySQL主从集群默认采用的是一种异步复制的机制。主服务在执行用户提交的事务后,写入binlog日志,然后就给客户端返回一个成功的响应了。而binlog会由一个dump线程异步发送给Slave从服务。 ​ 由于这个发送binlog的过程是异步的。主服务在向客户端反馈执行结果时,是不知道binlog是否同步成功了的

weixin_42446078的博客 1027

MySQL半同步复制机制详解:AFTER_SYNC vs AFTER_COMMIT 的优劣与选择

其设计缺陷(主库提交后等待 ACK)导致在主库崩溃时存在已提交事务丢失的风险,这违背了使用半同步复制提高数据安全性的初衷。MySQL 社区和官方早已认识到此问题。AFTER_SYNC它真正实现了半同步复制防止数据丢失的核心价值:确保每个对客户端报告成功提交的事务,其 Binlog 必定已持久化在至少一个从库上。它提供了更强的数据一致性和故障切换安全性。其潜在的性能开销(锁持有时间稍长)在绝大多数生产环境中微乎其微,且是保障数据安全必须付出的合理代价。MySQL 8.0 已默认使用。

翔云 1021

mysql的半同步机制_MySQL 半同步复制模式说明及配置示例 - 运维小结

MySQL主从复制包括异步模式、半同步模式、GTID模式以及多源复制模式,默认是异步模式(如之前详细介绍的mysql主从复制)。所谓异步模式指的是MySQL 主服务器上I/O thread 线程将二进制日志写入binlog文件之后就返回客户端结果,不会考虑二进制日志是否完整传输到从服务器以及是否完整存放到从服务器上的relay日志中,这种模式一旦主服务(器)宕机,数据就可能会发生丢失。异步模式是一...

weixin_31572189的博客 478

使用Docker快速体验MySQL半同步复制机制

1. MySQL Image的选取MySQL官方提供了标准Image,能够满足基本的MySQL功能。假如本地没有这个Image,可以通过以下命令获取。docker pull mysql默认拉取的是latest版本,也可指定具体版本,如:docker pull mysql:5.7但需要注意的是,半同步复制是从5.5版本开始支持的,所以最低需要5.5版本。2....

xingduan5153的博客 289

docker mysql 同步_【docker】使用Docker快速体验MySQL半同步复制机制

准备工作 docker 拉取安装 docker 镜像配置外部conf 文件编辑主库配置# 编辑vi docker/mysql/master/conf/my.cnf#内容[mysqld]binlog-format=ROWlog-bin=master-binlog-slave-updates=truegtid-mode=onenforce-gtid-consistency=truemaster-inf...

weixin_33583419的博客 100

mysql如何确保主从数据完全同步_开启半同步复制机制

— 必须为 ON,且 SHOW PROCESSLIST 中有 semi sync 相关线程关键陷阱:rpl_semi_sync_master_enabled 和 rpl_semi_sync_slave_enabled 是启动参数,但运行中可能因网络抖动、从库 IO 延迟等被动态置 OFF,需定期监控配置半同步必须改的三个参数MySQL 自带的半同步插件(rpl_semi_sync_master / rpl_semi_sync_slave)不依赖额外组件,但默认全关,且超时设置极不友好。

a951141642的博客 244

半同步复制

半同步机制:MySQL复制环境中的同步,默认采用异步的方式。从MySQL5.5开始提供半同步复制机制(Semisynchronous Replication)。Master在返回操作成功(或失败)信息给发起请求的客户端前,还是要将事务发送给Slave节点,Master节点只需要确认至少一个Slave接收到了事务,即可向发起请求的客户端返回操作成功的信息,Master节点不需要等待Slav...

aohexi1719的博客 146

mysql半同步 syn点位_说说MySQL的半同步复制

MySQL Semisynchronous ReplicationMySQL5.5 除了支持内置的异步复制机制,还提供了接口支持半同步复制的机制。在mysql异步复制的情况下,Mysql Master Server将自己的Binary Log通过复制线程传输出去以后,Mysql Master Sever就自动返回数据给客户端,而不管slave上是否接受到了这个二进制日志。在半同步复制的架构下,当m...

weixin_30015835的博客 116
上一篇: 数据库中间件mycat实现数据库读写分离
下一篇: mha配置高可用mysql
parameter_
博客等级 码龄10年 24粉丝 102原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值