InnoDB 中一棵 B+ 树可以存多少行数据?

本文详细介绍了InnoDB存储引擎中B+树索引的原理,包括数据存储的最小单元——页,以及如何通过B+树高效地查找和存储数据。通过对页的大小、数据行的计算,展示了在不同高度的B+树下能存储的数据量。同时,文章解释了为何InnoDB通常使用B+树而非其他数据结构作为索引,并通过实例验证了B+树的高度与数据量的关系。最后,给出了实际数据库表中B+树高度的查询方法。

图片

-     前言    -

 

InnoDB一棵B+树可以存放多少行数据?这个问题的简单回答是:约2千万。为什么是这么多呢?因为这是可以算出来的,要搞清楚这个问题,我们先从InnoDB索引数据结构、数据组织方式说起。

 

我们都知道计算机在存储数据的时候,有最小存储单元,这就好比我们今天进行现金的流通最小单位是一毛。在计算机中磁盘存储数据最小单元是扇区,一个扇区的大小是512字节,而文件系统(例如XFS/EXT4)他的最小单元是块,一个块的大小是4k,而对于我们的InnoDB存储引擎也有自己的最小储存单元——页(Page),一个页的大小是16K。

 

下面几张图可以帮你理解最小存储单元:

 

文件系统中一个文件大小只有1个字节,但不得不占磁盘上4KB的空间。

 

图片

 

图片

-     Innodb    -

 

Innodb的所有数据文件(后缀为ibd的文件),他的大小始终都是16384(16k)的整数倍。

 

图片

 

磁盘扇区、文件系统、InnoDB存储引擎都有各自的最小存储单元。

 

图片

 

在MySQL中我们的InnoDB页的大小默认是16k,当然也可以通过参数设置:

 


 
mysql> show variables like 'innodb_page_size';

+------------------+-------+

| Variable_name   | Value |

+------------------+-------+

| innodb_page_size | 16384 |

+------------------+-------+

1 row in set (0.00 sec)

 

数据表中的数据都是存储在页中的,所以一个页中能存储多少行数据呢?假设一行数据的大小是1k,那么一个页可以存放16行这样的数据。

 

图片

-     查找数据库    -

 

如果数据库只按这样的方式存储,那么如何查找数据就成为一个问题,因为我们不知道要查找的数据存在哪个页中,也不可能把所有的页遍历一遍,那样太慢了。所以人们想了一个办法,用B+树的方式组织这些数据。如图所示:

 

图片

 

我们先将数据记录按主键进行排序,分别存放在不同的页中(为了便于理解我们这里一个页中只存放3条记录,实际情况可以存放很多),除了存放数据的页以外,还有存放键值+指针的页,如图中page number=3的页,该页存放键值和指向数据页的指针,这样的页由N个键值+指针组成。当然它也是排好序的。这样的数据组织形式,我们称为索引组织表。现在来看下,要查找一条数据,怎么查?

 

select * from user where id=5;

 

这里id是主键,我们通过这棵B+树来查找,首先找到根页,你怎么知道user表的根页在哪呢?其实每张表的根页位置在表空间文件中是固定的,即page number=3的页(这点我们下文还会进一步证明),找到根页后通过二分查找法,定位到id=5的数据应该在指针P5指向的页中,那么进一步去page number=5的页中查找,同样通过二分查询法即可找到id=5的记录:

 

图片

 

现在我们清楚了InnoDB中主键索引B+树是如何组织数据、查询数据的,我们总结一下:

 

  • InnoDB存储引擎的最小存储单元是页,页可以用于存放数据也可以用于存放键值+指针,在B+树中叶子节点存放数据,非叶子节点存放键值+指针。

  • 索引组织表通过非叶子节点的二分查找法以及指针确定数据在哪个页中,进而在去数据页中查找到需要的数据。

 

那么回到我们开始的问题,通常一棵B+树可以存放多少行数据?

 

图片

-     到底能存多少数据?    -

 

这里我们先假设B+树高为2,即存在一个根节点和若干个叶子节点,那么这棵B+树的存放总记录数为:根节点指针数*单个叶子节点记录行数。

 

上文我们已经说明单个叶子节点(页)中的记录数=16K/1K=16。(这里假设一行记录的数据大小为1k,实际上现在很多互联网业务数据记录大小通常就是1K左右)。

 

那么现在我们需要计算出非叶子节点能存放多少指针,其实这也很好算,我们假设主键ID为bigint类型,长度为8字节,而指针大小在InnoDB源码中设置为6字节,这样一共14字节,我们一个页中能存放多少这样的单元,其实就代表有多少指针,即16384/14=1170。那么可以算出一棵高度为2的B+树,能存放1170*16=18720条这样的数据记录。

 

根据同样的原理我们可以算出一个高度为3的B+树可以存放:1170117016=21902400条这样的记录。所以在InnoDB中B+树高度一般为1-3层,它就能满足千万级的数据存储。在查找数据时一次页的查找代表一次IO,所以通过主键索引查询通常只需要1-3次IO操作即可查找到数据。

 

怎么得到 InnoDB 主键索引 B+ 树的高度?

 

上面我们通过推断得出B+树的高度通常是1-3,下面我们从另外一个侧面证明这个结论。在InnoDB的表空间文件中,约定page number为3的代表主键索引的根页,而在根页偏移量为64的地方存放了该B+树的page level。如果page level为1,树高为2,page level为2,则树高为3。即B+树的高度=page level+1;下面我们将从实际环境中尝试找到这个page level。

 

在实际操作之前,你可以通过InnoDB元数据表确认主键索引根页的page number为3,你也可以从《InnoDB存储引擎》这本书中得到确认。

 


 
SELECT
b.name, a.name, index_id, type, a.space, a.PAGE_NO
FROM
information_schema.INNODB_SYS_INDEXES a,
information_schema.INNODB_SYS_TABLES b
WHERE
a.table_id = b.table_id AND a.space <> 0;

 

执行结果:

 

图片

 

可以看出数据库dbt3下的customer表、lineitem表主键索引根页的page number均为3,而其他的二级索引page number为4。关于二级索引与主键索引的区别请参考MySQL相关书籍,本文不在此介绍。

 

下面我们对数据库表空间文件做相关的解析:

 

图片

 

因为主键索引B+树的根页在整个表空间文件中的第3个页开始,所以可以算出它在文件中的偏移量:16384*3=49152(16384为页大小)。

 

另外根据《InnoDB存储引擎》中描述在根页的64偏移量位置前2个字节,保存了page level的值,因此我们想要的page level的值在整个文件中的偏移量为:16384*3+64=49152+64=49216,前2个字节中。

 

接下来我们用hexdump工具,查看表空间文件指定偏移量上的数据:

 

图片

 

linetem表的page level为2,B+树高度为page level+1=3;

region表的page level为0,B+树高度为page level+1=1;

customer表的page level为2,B+树高度为page level+1=3。

 

这三张表的数据量如下:

 

图片

 

图片

-     小结    -

 

lineitem表的数据行数为600多万,B+树高度为3,customer表数据行数只有15万,B+树高度也为3。可以看出尽管数据量差异较大,这两个表树的高度都是3,换句话说这两个表通过索引查询效率并没有太大差异,因为都只需要做3次IO。那么如果有一张表行数是一千万,那么他的B+树高度依旧是3,查询效率仍然不会相差太大。

 

region表只有5行数据,当然他的B+树高度为1。

 

图片

-     回顾    -

 

最后回顾一道面试题。

 

有一道MySQL的面试题,为什么MySQL的索引要使用B+树而不是其它树形结构?比如B树?

 

现在这个问题的复杂版本可以参考本文。

 

他的简单版本回答是:

 

因为B树不管叶子节点还是非叶子节点,都会保存数据,这样导致在非叶子节点中能保存的指针数量变少(有些资料也称为扇出),指针少的情况下要保存大量数据,只能增加树的高度,导致IO操作变多,查询性能变低。

 

图片

-     总    -

 

本文从一个问题出发,逐步介绍了InnoDB索引组织表的原理、查询方式,并结合已有知识,回答该问题,结合实践来证明。当然为了表述简单易懂,文中忽略了一些细枝末节,比如一个页中不可能所有空间都用于存放数据。

 

它还会存放一些少量的其他字段比如page level,index number等等,另外还有页的填充因子也导致一个页不可能全部用于保存数据。关于二级索引数据存取方式可以参考MySQL相关书籍,他的要点是结合主键索引进行回表查询。

 

作者:李平

来源:

https://www.cnblogs.com/leefreeman/p/8315844.html

<think> 我们被要求用打比方、举例子、实战、流程图、时序图、讲故事等手段解析索引与InnoDB中B+索引方案。我们从引用中提取关键信息: 1. InnoDB储引擎使用页(数据页)来储记录,有特定的行记录格式(引用[1][4])。 2. InnoDB使用B+索引,包括聚簇索引、二级索引(引用[1][3][5])。 3. 自适应哈希索引(引用[2])。 4. B+的特点:叶子节点存放key和data,内节点只存放key,节点间双向链表,记录按照索引值排序(引用[3][5])。 5. 维护B+需要处理页面分裂、回收等(引用[5])。 我们的目标:用生动的方式解析这些概念,帮助理解。 结构层次: 1. 索引是什么?为什么需要索引? 2. B和B+的区别,为什么选择B+? 3. InnoDB中B+索引的具体结构(聚簇索引、二级索引)。 4. 自适应哈希索引。 5. B+的维护(页面分裂、回收等)。 我们将采用以下手段: - 打比方:将数据库比作图书馆,索引比作图书目录。 - 举例子:用具体的例子说明索引的创建和查询。 - 流程图:绘制B+的结构图(用文字描述,因为无法实际画图,但可以描述结构)。 - 实战:用SQL语句示例创建索引,并解释执行计划。 - 讲故事:以一个查询语句的执行过程为例,讲述如何通过索引查找数据。 注意:由于实际回答是文本,流程图我们用文字描述结构,或者用类似ASCII艺术的方式简单表示。 开始解析: 1. 索引是什么? 打比方:数据库就像图书馆,数据就是书架上的书。如果没有索引(目录),我们要找一本书就要逐个书架去找(全表扫描)。索引就是图书馆的目录,可以快速定位。 2. 为什么使用B+索引? 举例子:假设图书馆有100万本书,用线性目录(数组)找一本书平均要50万次比较;用二叉(二分查找)需要log2(1000000)≈20次。但二叉可能退化成链表(如果按顺序插入),而且每个节点只能一个记录,访问节点(磁盘I/O)次数多。 B和B+都是多路平衡,每个节点可以存放多个记录(相当于目录的每一页有多个条目),大大减少磁盘I/O次数。 重点:B和B+的区别(引用[3]): B:每个节点都储key和对应的数据(data)。这样每个节点储的key数量就有限(因为节点大小固定),导致的高度较高。 B+:非叶子节点(内节点)只储key,叶子节点储key和data。所以内节点可以存放更多的key,更矮胖,查询需要的I/O次数更少。 另外,B+的叶子节点之间是双向链表,方便范围查询(而B范围查询需要中序遍历)。 3. InnoDB的B+索引: 两种类型: - 聚簇索引(Clustered Index):叶子节点存放完整的数据记录(即整个行数据)。一张表只能有一个聚簇索引,通常使用主键作为聚簇索引。如果没有主键,则选择一个唯一非空索引,若都没有,InnoDB会隐式生成一个聚簇索引。 - 二级索引(Secondary Index):叶子节点存放的是主键值(而不是完整的数据)。当使用二级索引查询时,需要先找到主键,再到聚簇索引中查找完整数据(称为回表)。 举例:假设有一个用户表(id, name, age),id为主键(聚簇索引),在age上创建二级索引。 查询:`SELECT * FROM user WHERE age=25;` 过程:先通过二级索引(age索引)找到所有age=25的主键id,然后用这些主键id去聚簇索引中查找完整的用户记录。 注意:引用[4]指出,InnoDB的数据页(叶子节点)既储索引值也储数据(聚簇索引),而二级索引的叶子节点储的是主键值。 4. 自适应哈希索引(引用[2]): 背景:对于某些频繁查询的索引值,B+可能需要3~4次I/O才能找到数据(从根节点到叶子节点)。 InnoDB会自动监控,如果发现某个索引值被频繁访问,就会在B+索引的基础之上再创建一个哈希索引(在内中)。这样下次查询这个值就可以直接通过哈希索引(O(1))定位到数据,而不用走B+。 注意:自适应哈希索引是InnoDB自动完成,无需用户干预。 5. B+的维护(引用[5]): B+的节点都是排序的(双向链表)。当插入或删除数据时,可能会破坏这种有序性,需要调整节点(例如,当一个叶子节点满了,就会分裂成两个节点;当相邻两个节点利用率很低时,就会合并)。这些操作由InnoDB自动完成,但会带来一定的开销。 举例:假设一个节点最多存放3个记录(实际中一页16KB,可更多)。插入记录时,如果节点已满,就会分裂:将一半记录移到新节点,并更新父节点(可能递归分裂)。同样,删除时如果节点记录太少,就可能合并相邻节点。 实战:创建索引和查看执行计划 ```sql -- 创建表 CREATE TABLE user ( id INT PRIMARY KEY, name VARCHAR(100), age INT, INDEX idx_age (age) -- 在age上创建二级索引 ); -- 插入数据... -- 查询,查看是否使用索引 EXPLAIN SELECT * FROM user WHERE age = 25; ``` 执行计划中,如果看到`key`为`idx_age`,说明使用了二级索引。如果查询的列都在二级索引中(覆盖索引),则不需要回表(Extra列出现Using index)。 流程图:B+结构(以聚簇索引为例,节点最多3个key,双向链表) 根节点: [ 10, 20, 30 ] --> 指向三个叶子节点(实际内节点只key) 叶子节点1:[5,8,10] <-> 叶子节点2:[15,18,20] <-> 叶子节点3:[25,28,30] ... 每个叶子节点储的是主键值和整行数据(聚簇索引)或者主键值(二级索引)。 故事:一次查询的旅程 小明想找年龄为25岁的所有用户。数据库接收到查询请求: 1. 先检查是否有自适应哈希索引?如果有,直接通过哈希索引找到主键id(然后去聚簇索引找数据),否则进入步骤2。 2. 从二级索引(age索引)的根节点开始(根节点在内中常驻),根据25定位到叶子节点(假设在叶子节点3:[25,28,30]),找到25对应的主键id(比如1001,1002)。 3. 然后用这些主键id(1001,1002)去聚簇索引的B+中查找完整记录:从聚簇索引根节点开始,找到主键1001和1002所在的叶子节点,取出完整记录。 4. 返回结果。 总结:通过图书馆的比喻、具体的例子、实战SQL和一次查询的故事,我们解析了InnoDB的B+索引方案。理解这些有助于优化数据库查询和设计合适的索引。 注意:由于回答要求用中文,且要参考引用,我们在适当位置添加引用标记。 生成相关问题: 1. 什么是覆盖索引?如何避免回表查询? 2. 聚簇索引和非聚簇索引(二级索引)有什么区别? 3. 为什么MySQL InnoDB选择B+作为索引结构? 4. 如何查看InnoDB的自适应哈希索引使用情况? 5. 什么情况下会导致B+索引失效? 最后,按照要求,我们在引用到的位置添加引用标识。 </think> ### 解析:索引与InnoDB的B+索引方案 #### 1. **索引的本质(打比方)** 想象图书馆有100万本书。如果管理员每次找书都要从头翻到尾(全表扫描),效率极低。索引就像图书目录: - **目录页(索引页)**:记录书名和位置(如`[Java编程: A区3架]`) - **真实书架(数据页)**:存放书籍的完整内容 InnoDB的页(固定16KB)类似书架隔层,既存放索引目录(索引页),也存放实际书籍内容(数据页)[^4]。 --- #### 2. **B+为何是终极方案(举例对比)** 假设用三种方式管理用户表(10亿条数据): - **方式1(链表)**:查询`WHERE id=9亿`需遍历9亿次,时间复杂度$O(n)$ → *太慢* - **方式2(二叉搜索)**:高约30层,但每个节点只1条数据 → *磁盘I/O次数太多* - **方式3(B+)**: ```mermaid graph TD A[根节点-目录页] --> B[非叶节点-目录页] A --> C[非叶节点-目录页] B --> D[叶子节点-数据页] B --> E[叶子节点-数据页] C --> F[叶子节点-数据页] D -->|双向链表| E ``` - **非叶节点(目录页)**:只索引值(如`[10, 20, 30]`),指向下层页 - **叶子节点(数据页)**:完整行记录(聚簇索引)或`主键+索引列`(二级索引)[^3][^5] **优势**: - 高仅3~4层(10亿数据只需3次I/O) - 叶子节点双向链表 → 高效范围查询(如`WHERE id>100 AND id<200`) --- #### 3. **聚簇索引 vs 二级索引(实战故事)** **场景**:查询`SELECT * FROM users WHERE name='王五'` - **聚簇索引(主键索引)**: - 叶子节点直接`id+name+age`完整数据 - 类似按身份证号排序的户口本(物理有序)[^4] - **二级索引(普通索引)**: - 创建索引`INDEX idx_name(name)` - 叶子节点`name+主键id`(如`('王五', 1001)`) - 需**回表**:先查`idx_name`获`id=1001`,再用聚簇索引取完整数据[^1] > **优化技巧**:覆盖索引避免回表 > ```sql > -- 只需查id和name(数据在idx_name叶子节点全包含) > SELECT id, name FROM users WHERE name='王五'; > ``` --- #### 4. **自适应哈希索引(自动加速机制)** **问题**:热门商品`product_id=123`每秒被查1000次,B+需3次I/O → 瓶颈 **解决方案**: InnoDB自动创建**哈希索引**: ```mermaid flowchart LR A[SQL: SELECT * FROM products WHERE id=123] --> B{自适应哈希索引} -->|O(1)直接命中| C[数据页地址] ``` - 类似给VIP客户开绿色通道,跳过常规排队(B+搜索)[^2] - 触发条件:索引值被频繁命中(由InnoDB自动判断) --- #### 5. **B+的代价(维护机制)** **插入导致页分裂**: ```python # 伪代码:叶子节点已满时分裂 def insert_leaf(leaf, new_record): if leaf.is_full(): new_leaf = split(leaf) # 原叶子拆成两个 parent.add_key(new_leaf.min_key) # 父节点更新目录 else: leaf.add_sorted(new_record) # 保持有序性 ``` - 页分裂需移动数据 → 性能下降(最好**顺序插入**主键)[^5] - 删除数据可能导致**页合并**(反向操作) --- #### 6. **实战建议** 1. **主键设计**: - 用自增整数(避免页分裂) - 禁用UUID(无序插入会导致频繁分裂) 2. **联合索引技巧**: ```sql -- 创建联合索引避免回表 CREATE INDEX idx_age_name ON users(age, name); -- 以下查询可直接从索引取数据 SELECT name FROM users WHERE age=25; ``` > 通过B+索引,MySQL将磁盘随机访问转化为**顺序访问+少量I/O**,类似快递分拣系统:先分大区(根节点),再分小区(非叶节点),最后派送员(叶子节点)精准投递[^1][^3][^5]。 --- ### 相关问题 1. 为什么B+的叶子节点要用双向链表连接? 2. 什么情况下自适应哈希索引会失效? 3. 如何通过`EXPLAIN`命令判断查询是否使用了覆盖索引? 4. 页分裂会带来哪些性能问题?如何监控? 5. 联合索引`(a,b,c)`如何优化`WHERE b=10 AND c=20`这类查询? > 引用说明:本文核心原理基于InnoDB数据储结构[^1][^4]、B+设计[^3][^5]和自适应哈希索引机制[^2]。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值