MySQL写缓冲Change Buffer原理解读

最新推荐文章于 2025-05-19 21:18:09 发布
原创 最新推荐文章于 2025-05-19 21:18:09 发布 · 301 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql #数据库 #缓存

本文详细介绍了MySQLInnoDB的ChangeBuffer机制，包括其如何优化写操作、结构、工作流程以及适用场景。ChangeBuffer主要用于存储对非唯一索引的修改操作，以减少磁盘I/O，提升数据库性能。

什么是Change Buffer

我们知道MySQL在查询的时候有一种预读机制， 为了提高同样数据的查询效率，会将磁盘中的数据加载到内存中，Buffer Pool(缓冲池)就承担了这么一个角色。

如果每次写操作，数据库都直接更新磁盘中的数据，会很占磁盘IO，那么MySQL是怎么优化的呢？

当用户执行SQL对非唯一索引进行更改时，如果索引对应的数据页不在缓存中时，InnoDB不会直接加载磁盘数据到缓存数据页中，而是缓存对这些更改操作(buffer changes)。

缓存区的更改操作会在磁盘数据被其它读操作加载到缓存中时合并(Merge)到对应的缓存数据页中。

InnoDB在Buffer Pool中开辟了一块内存，用来存储变更记录，用来缓存写操作到内存，就是Change Buffer。

MySQL使用它的目的是降低写操作的磁盘IO，提升数据库性能。

OK，Change Buffer基本概念了解了，继续往下读！

Change Buffer结构

我把InnoDB和Change Buffer的结构整合了一下，让我们更清楚 Change Buffer的位置。

从图中右侧信息可以做一些小总结：

  1. ChangeBuffer用于存储SQL变更操作；
  2. ChangeBuffer中的每个变更操作都有其对应的数据页，并且该数据页未加载到缓存中；
  3. 当ChangeBuffer中变更操作对应的数据页加载到缓存中后，InnoDB会把变更操作Merge到数据页上；
  4. InnoDB会定期加载Change Buffer中操作对应的数据页到缓存中，并Merge变更操作
最低0.47元/天 解锁文章
MySQL-change buffer的总结
飞越蓝天的专栏
10-12 1020
一 change buffer 是什么 change buffer (写缓冲)是一种应用在非唯一普通索引页(non-unique secondary index page)不在缓冲池中，对页进行了写操作，并不会立刻将磁盘页加载到缓冲池，而仅仅记录缓冲变更(buffer changes)，等未来数据被读取时，再将数据合并(merge)恢复到缓冲池中的技术。它的目的是降低写操作的磁盘IO，提升数据库性能。 二 为什么需要change buffer 假设没有change buffer ，在缓冲池中没有对应数据页时
change buffer(写缓冲)
雪辉博客
08-16 7342
文章目录1.1 什么是change buffer1.2 change buffer 原理1.3 change buffer为什么针对非唯一普通索引页1.4 相关变量1.5 监控指标 1.1 什么是change buffer   在MySQL中数据分为内存和磁盘两个部分；在buffer pool中缓存热的数据页和索引页，减少磁盘读；通过change buffer就是为了缓解磁盘写的一种手段。   change buffer就是在非唯一普通索引页不在buffer pool中时，对页进行了写操作的情况下，先将记录
【MySQL（四）】change buffer机制
u010900754的专栏
06-14 1564
change buffer是针对数据库的更新语句做的一种优化。之前介绍过，wal机制是一种更新语句的优化，可以将磁盘随机写转变为磁盘顺序写。那么change buffer 又是如何优化的呢？ 个人理解：wal是使用了redo log，在磁盘级别缓存了更新操作，磁盘随机写->磁盘顺序写；change buffer是使用了内存buffer，在内存级别又缓存了一次更新操作，降低了磁盘随机读的次数。 详细看下： 对于一次更新操作，innodb引擎会看更新的页是否在buffer pool中，如果在，那么直
MySQL中的Change Buffer是什么，它有什么作用？
最新发布
2301_79914109的博客
05-19 952
然而，随着存储技术的发展（尤其是SSD的广泛应用），其必要性和默认配置也在发生变化，需要根据具体的硬件环境和工作负载进行评估和调整。
Change Buffer介绍
CrazyRabbitttt
07-15 1057
本文主要是介绍了Mysql 中 change buffer的内容，包含适用场景和分析如何提升性能，希望能够帮助到大家
写缓冲(change buffer)，这次彻底懂了！！！
热门推荐
shenjian58的博客
06-25 1万+
上篇《缓冲池(buffer pool)，彻底懂了！》介绍了InnoDB缓冲池的工作原理。简单回顾一下：（1）MySQL数据存储包含内存与磁盘两个部分；（2）内存缓冲池(...
第五篇：MySQL之缓冲池（buffer pool）和写缓冲（change buffer）
qq_40276626的博客
07-22 1289
1、buffer pool buffer pool的优点 buffer pool是MySQL在内存中开辟的一片区域，用来存放磁盘中的数据页。 利用redolog和buffer pool可以提高读取效率。 当要读取的数据页在buffer pool中，直接在内存中读取得到，不用再读取磁盘。如果要修改数据页，将相关日志顺序写道redo log file中。 buffer pool的管理算法 MySQL中的buffer pool采用的改进版的LRU算法。 MySQL在从磁盘往内存中读取数据页时，会额外读取周围的数据
MySQL双写缓冲区DoubleWrite Buffer和ChangeBuffer
Minor的Java技术博客
07-09 627
InnoDB的索引一般使用B+Tree的数据结构，但是InnoDB还支持一种索引的方式：哈希索引。InnoDB底层会实时监控索引，如果某个索引使用十分频繁，就会被认定为这个索引是热点数据，然后在InnoDB的Buffer Pool内存中创建一个Hash索引，称之为自适应Hash索引。创建以后，如果下次的查询又命中索引，那么就可以利用这个Hash索引直接O(1)的时间复杂度就能查询结果。 但是，自适应hash索引只能提供的查询，做范围、模糊查询是不支持的。而且InnoDB的自适应Hash索引使用的是拉链法解决
MySQL 数据库的提速器-写缓存（Change Buffer）
12-14
写缓存（Change Buffer） 是一种特殊的数据结构，用于在对数据变更时，如果数据所在的数据页没有在 buffer ...关于 MySQL 写缓存（Change Buffer），我们先来看看 InnoDB 的技术架构图： Change Buffer 是 Buffer Po
数据库常见的索引模型
weixin_42595206的博客
03-27 1698
1. 索引模型 数据库的常见索引模型有hash表，有序数组和搜索树 hash表：哈希表是一种以键-值（key-value） 存储数据的结构 优点：新增记录时速度很快 缺点：不是有序的，hash索引做区间查询很慢 有序数组：按照索引递增的顺寻存在数组中 优点：有序数组在等值查询和范围查询场景中的性能都非常优秀 缺点：新增记录的成本较高 搜索树： 二叉搜索树：每个节点的左儿子小于父节点， 父节点又小于右儿子。 优点：查找的复杂度为log(n) 缺点： 新增记录的时候，需要维护平衡二叉树，增加
总结 mysql 的所有 buffer，一网打尽就这篇了！
m0_73311735的博客
10-19 1607
好了，关于 innodb buffer 们介绍完了，我们来总结一下：buffer pool，缓存数据页，避免频繁地磁盘交互，内部利用定制的 LRU 来淘汰缓存页，LRU分老年代和新生代。change buffer，用于二级非唯一索引的新增、修改或删除操作，当 buffer pool 没有数据的时候，不需要加载数据页到缓冲池中，而是通过 change buffer 来记录此变更，减少随机 I/O。log buffer，用于 redo log 的缓冲，减少 I/O，批处理减少系统调用。
MySQL 之 InnoDB引擎 Change Buffer
心有猛虎 细嗅蔷薇
04-22 8849
Change Buffer Change Buffer是一种特殊的数据结构，缓存对二级索引页面的更改并且这些页面不在Buffer Pool中。缓存的changes可能由 Insert 、Delete 和 Update的结果导致。稍后在页面被其他读取操作加载到Buffer Pool的时候合并。 Buffer Pool的研究在我的这篇里有：https://blog.youkuaiyun.com/qq_3665...
MySQL · 引擎特性 · Innodb change buffer介绍
bohu83的博客
08-20 4721
一 序     之前整理了undo log、redo log以及InnoDB如何崩溃恢复来实现数据ACID的相关知识。本篇继续整理InnoDB change buffer。 Change buffer的主要目的是将对二级索引的数据操作缓存下来，以此减少二级索引的随机IO，并达到操作合并的效果。   官网的解释比较详细了。5.7版本的截取如下：  Change Buffer The ch...
Change Buffer有什么用
yzc_sky的博客
08-28 809
Change Buffer有什么用 文章目录Change Buffer有什么用问题准备工作Change Buffer 作用场景修改后立即读取会如何为什么唯一索引无法使用Change Buffer总结 问题 change buffer 有什么作用？ 什么情况下会用到change buffer 准备工作 select * from information_schema.innodb_metrics where name like '%ibuf%'; 可以查看到change buffer 的相关信息： 创
写缓冲(change buffer)
耿小渣的进阶之路
09-09 1128
简单回顾一下： （1）MySQL数据存储包含内存与磁盘两个部分； （2）内存缓冲池(buffer pool)以页为单位，缓存最热的数据页(data page)与索引页(index page)； （3）InnoDB以变种LRU算法管理缓冲池，并能够解决“预读失效”与“缓冲池污染”的问题； 画外音：细节详见《缓冲池(buffer pool)》。 毫无疑问，对于读请求，缓冲池能够减少...
数据库原理: Change Buffer 是干什么的？
王小明的专栏
07-12 1193
数据库原理: Change Buffer 是干什么的？ redo log 主要节省的是随机写磁盘的 IO 消耗（转成顺序写），而 change buffer 主要节省的是随机读磁盘的IO消耗。 实例:插入过程 插入语句 insert into t(id,k) values(id1,k1),(id2,k2); 假设当前 k 索引树的状态，查找到位置后，K1 所在的数据页在内存（InnoDB buffer pool）中，K2 所在的数据页不在内存中。 包含 几个部分： 内存、redo log（ib_log
mysql change buffer
敖尔其楞的专栏
07-01 2643
change buffer是存放二级索引的没有在bufferr pool的变更页的缓存区，变更的buffer是由insert，update,delete等操作导致的。等页被加载进buffer pool中后会将change buffer中的页合并。 二级索引通常是非唯一的，插入也是很随机的顺序，更新删除也都不是在邻近的位置，所以change buffer就避免了很多的随机io的产生。puge操作会
MySQL | 普通索引和唯一索引，应该怎么选择？
sinat_27143551的博客
03-24 646
在前面的基础篇文章中，我给你介绍过索引的基本概念，相信你已经了解了唯一索引和普通索引的区别。今天我们就继续来谈谈，在不同的业务场景下，应该选择普通索引，还是唯一索引？假设...
MySQL InnoDB的Insert Buffer与Change Buffer机制解析
“MySQL InnoDB的关键特性包括插入缓冲（Insert Buffer）、变更缓冲（Change Buffer），以及它们在处理非聚集索引和内存管理上的作用。” 在MySQL的InnoDB存储引擎中，有两项重要的性能优化机制，它们是插入缓冲...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值