mysql中binglog底层原理分析

最新推荐文章于 2024-05-26 17:28:25 发布
转载 最新推荐文章于 2024-05-26 17:28:25 发布 · 160 阅读 · 0 ·
CC 4.0 BY-SA版权
原文链接：http://www.cnblogs.com/james0/p/9280859.html

本文介绍了MySQL中的binlog机制及其实现的主从复制过程。详细解释了binlog记录方式，包括statement、row和mixed模式，并说明了这些模式在实际应用中的优缺点。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

binglog 是一个二进制的日志文件，会记录mysql的数据更新或潜在个跟新 （delete from table where id =xxx）

主从复制就是依靠binglog

master -slave

master负责更新操作
slave同步master数据，增加读操作的性能，分担读操作的负担

io thread sql thread

relay log

binglog
statement 默认的 基于sql语句

row，基于行模式， 修改了一张表， update table set value =x; 更新了1000条， 记录1000条变更的数据

mixed 混合模式， 更具具体情况，判断用statement模式还是row模式

转载于:https://www.cnblogs.com/james0/p/9280859.html

大聪明教你学Java | 带你了解 Binlog 实现 MySQL 主从同步的原理及实现方式
不肯过江东丶
12-26 880
之前我们说过，大聪明新加入了一个智慧运输平台建设的项目组，在项目组中学习到了许多之前没有接触过的东西。这不，大聪明又发现平台的建设过程中使用了两套 MySQL 数据库，也就是我们常说的主从库，这时候大聪明有了一个新的疑问：“这个主库和从库是怎么保证数据一致的呢🤔？”。这个新的问题又激起了大聪明的求知欲，接下来我们一起看看大聪明的求知历程✍
MySQL原理与实践
xiaofanguan的博客
10-12 233
如果这个时候发生非正常的DB服务重启，那么这些数据还没在内存，并没有同步到磁盘文件中(注意，同步到磁盘文件是个随机I0)，也就是会发生数据丢失，如果这个时候，能够在有一个文件，当buffer pool中的数据页变更结束后，把相应修改记录记录到这个文件(注意，记录日志是顺序10，循环写)，那么当DB服务发生crash，进行恢复DB的时候，可以根据这个文件的记录内容，重新持久化刷新到磁盘文件，保持数据的一致性。这里日志先行，说的是日志记录到数据库以后，对应的事务就可以返回给用户，表示事务完成。
mysql binglo_mysql主-主热备
weixin_42335570的博客
01-19 96
以下的主--主热备中的描述的，请参见主从热备的文章。3. Mysql建立主－主服务器双机热备配置步骤服务器还是用回现在这两台服务器3.1创建同步用户同在在主服务器上为从服务器建立一个连接帐户，该帐户必须授予REPLIATION SLAVE权限。这里因为服务器A和服务器B互为主从，所以都要分别建立一个同步用户。服务器A：mysql> grant replication slave on *.*...
知识篇| mysql binglog 之专题讲解
db_murphy的博客
09-14 355
MySQL Server 主要有四种类型的日志——Error Log、General Query Log、Binary Log 和 Slow Query Log。 其中， Binlog 包含了一些事件，这些事件描述了数据库的改动，如建表、数据改动等，也包括一些潜在改动，比如 DELETE FROM tbs_test WHERE bing = ‘test_contition’ ，实际表中没有一条数据符合过滤条件，当然也就没有数据被删掉的情况，也会记录。除非使用 Row-based logging，否则会包含所
redolog 、undolog 和binlog
weixin_56289362的博客
04-25 6363
首先提及一下事务的ACID ：原子性、一致性、隔离性和持久性 隔离性：是由 锁实现的 原子性、一致性、和持久性 是由 redo log 和undo log
mysql日志文件bin-log,redo-log,undo-log总结
gaoganghua的博客
10-30 376
在mysql中，缓冲池中的数据都是以页为单位的进行读写的（包括数据页，以及之前说过的索引页），而redo log就是记录物理页变化的日志文件，形如，XX表空间+XX偏移量写入了“XX”数据。redo log和bin log都是记录的更新操作，但是redo log记录的不是逻辑变化，而是物理页变化。redo log buffer是事务日志在内存中的空间，redo log file才是事务日志在磁盘上的空间。那么redo log是如何保证事务的持久性？
MySQL - binlog 图文详解
一七令
07-17 4645
binlog是MySQL的一种二进制日志，记录引起或可能（更新删除没有匹配的记录）引起数据库变动的事件信息。binlog以事件形式记录，不是事务日志。对于非事务表的操作，每当语句执行完成则直接写入；对于事务表的操作则会在事务提交时（先记录到缓存中）一次性写入。......
flink cdc mysql整理与总结
最新发布
努力工作学习的程序员
05-26 1872
1、FlinkCDC 提供了对 Debezium 连接器的封装和集成，简化了配置和使用的过程，并提供了更高级的 API 和功能，例如数据格式转换、事件时间处理等。Flink CDC 使用 Debezium 连接器作为底层的实现，将其与 Flink 的数据处理能力结合起来。通过配置和使用 Flink CDC，您可以轻松地将数据库中的变化数据流转化为 Flink 的 DataStream 或 Table，并进行实时的数据处理、转换和分析。2、Flink的DataStream和SQL比较成熟和易用。
MySQL
weixin_45626756的博客
11-07 470
InnoDB存储引擎（支持事务、行锁） InnoDb数据页结构 操作系统每次读取数据按页读取，一页大小4kb；mysql一页的大小是16kb，当一行数据大于16kb就需要跨页存储 InnoDB的B+树索引 主键索引： InnoDB中的id通过B+数建立索引主键索引，b+树的每个节点是一个数据页（16K），非叶子节点存储的是主键+下一页的指针，叶子节点存储的是数据，一个页中可以存储多条数据，一个页中的数据通过以链表形式连接（以主键顺序）。当一页中的数据较多的时候，还会为链表再建立一个索引，加快一页中的查询速
MySQL高级
qiumin的博客
05-19 3422
MySQL数据库高级进阶，索引，锁，分库分表，都写分离，MySQL数据库集群，运维
深入探索 MySQL Binlog：原理、工作机制与实践应用
数据与算法架构提升之路专栏
03-26 5万+
binlog是记录所有数据库表结构变更（例如CREATE、ALTER TABLE…）以及表数据修改（INSERT、UPDATE、DELETE…）的二进制日志。
MySQL下bin-log的三种模式（ROW、Statement、Mixed）
weixin_34184561的博客
03-25 449
2019独角兽企业重金招聘Python工程师标准>>> ...
MySQL binlog原理及应用
yedushusheng的专栏
11-20 387
01概述 Binlog它记录了所有的DDL和DML(除了数据查询语句)语句，以事件（EVENT）形式记录，还包含语句所执行的消耗的时间，MySQL的二进制日志是事务安全型的。 一般来说开启二进制日志大概会有1%的性能损耗（MySQL官方测试数据），虽然会降低性能，但是binlog可以用于主从复制（replication）和point-in-time的恢复，所以还是很有必要开启的。 查看： SHOWBINLOGEVENTIN'mysqld.00001'\G; ...
mysql binglog do db_19.mysql复制
weixin_42521731的博客
02-17 165
1. 复制概述复制是指将主数据库的DDL 和 DML 操作通过二进制日志传到从库服务器中，然后在从库上对这些日志重新执行(也叫重做)，从而使得从库和主库的数据保持同步。MySQL支持一台主库同时向多台从库进行复制， 从库同时也可以作为其他从服务器的主库，实现链状复制.2. 复制原理MySQL 的主从复制原理如下。image.png从上层来看，复制分成三步：Master 主库在事务提交时，会把数据变...
MySQL之binlog底层原理分析
进击30K的专栏
05-09 1448
binlog基本认识 MySQL中的binlog是一个二进制文件,它记录了所有的增删改操作。节点之间的复制就是依靠binlog来完成的。binlog具有三种模式: Row模式 日志中会记录成每一行数据被修改的日志，然后在slave端再对相同的数据进行修改。例如:update xxx where id in(1,2,3,4,5);采用该模式则会记录5条记录。 statement模式 每一条会修改数据的sql都会记录到 master的binlog中。slave在复制的时候sql Thread会解析成和
mysql开启binglog、慢查询日志、编码
waplys的博客
06-26 489
binlog # vi /etc/my.cnf [mysqld] # 开启 binlog log-bin=mysql-bin binlog-format=Row server-id=1 slowlog [mysqld] # 开启 slowlog log_output=file slow_query_log=on slow_query_log_file = /tmp/mysql-slow.lo...
mysqlbinglog-解析技术方案汇总
贾红平
05-09 688
MySQL Binlog 介绍
热门推荐
小旋锋 的博客
03-09 7万+
Binlog 简介 MySQL中一般有以下几种日志： 日志类型 写入日志的信息 错误日志 记录在启动，运行或停止mysqld时遇到的问题 通用查询日志 记录建立的客户端连接和执行的语句 二进制日志 记录更改数据的语句 中继日志 从复制主服务器接收的数据更改 慢查询日志 记录所有执行时间超过 long_query_time 秒的所有查询或不使用索引的查询 DDL日...
MySQL Binlog解析
weixin_34167819的博客
11-03 737
概述 MySQL的安装可以参考：Linux(CentOS)中常用软件安装，使用及异常——MySQL, VmTools MySQL关于Binlog的官方文档：The Binary Log 基于Binlog的主备复制：MySQL主备复制原理、实现及异常处理 什么是 Binlog MySQL Server 有四种类型的日志——E...
MySQL索引原理解析：数据结构与查询优化
"本文主要探讨了MySQL索引的底层实现原理，强调了索引作为数据结构对于提升数据库查询效率的重要性。文章提到了基本的顺序查找算法的局限性，并介绍了二分查找和二叉树查找等更高效的算法。通过示例说明了如何利用...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值