【MySQL 数据宝典】【磁盘结构】- 005 Undo log 撤销日志

本文详细阐述了MySQLInnoDB中UndoLog的作用、工作原理,包括事务的原子性保证、MVCC机制、undoLog的存储结构以及与之相关的参数设置,展示了如何通过undoLog实现数据的回滚和多版本控制。

一、基本介绍

​ 每当我们要对一条记录做改动时(这里的改动可以指 INSERT 、 DELETE 、 UPDATE ),都需要留一手 -> 把回滚时所需的东西都给记下来

​ 你插入一条记录时,至少要把这条记录的主键值记下来,之后回滚的时候只需要把这个主键值对应的记录删掉就好了。

​ 你删除了一条记录,至少要把这条记录中的内容都记下来,这样之后回滚时再把由这些内容组成的记录插入到表中就好了。

​ 你修改了一条记录,至少要把修改这条记录前的旧值都记录下来,这样之后回滚时再把这条记录更新为旧值 就好了。

​ 我们说过 事务 需要保证 原子性 ,也就是事务中的操作要么全部完成,要么什么也不做。但是偏偏有时候事务执 行到一半会出现一些情况,比如:

  • 情况一:事务执行过程中可能遇到各种错误,比如服务器本身的错误,操作系统错误,甚至是突然断电导致 的错误。
  • 情况二:程序员可以在事务执行过程中手动输入 ROLLBACK 语句结束当前的事务的执行

这两种情况都会导致事务执行到一半就结束,但是事务执行过程中可能已经修改了很多东西,为了保证事务的原 子性,我们需要把东西改回原先的样子,这个过程就称之为 回滚 (英文名: rollback ),这样就可以造成一个 假象:这个事务看起来什么都没做,所以符合 原子性 要求。

undo log是一种用于撤销回退的日志,在数据库事务开始之前,MySQL会先记录更新前的数据到 undo log日志文件里面,当事务回滚时或者数据库崩溃时,可以利用 undo log来进行回退。

  • 产生: 事务开始前产生,事务提交时不会立刻删除 undo log ,innodb 会把事务对应的 undo log 放入到删除列表中,后面会通过现场 purge thread 进行回收处理。

注意: undo log 也会产生 redo log ,因为 undo log 也需要持久性保护。

1.1 作用总结

  1. 提供回滚操作
    • Undo Log实现了事务的原子性。在数据修改时,除了记录redo log外,还记录了相应的undo log。如果事务执行失败,可以利用undo log进行回滚。
    • Undo Log是逻辑日志,记录了数据修改的逻辑操作,如delete操作对应的是insert操作,update操作对应相反的update操作
  2. 提供多版本控制(MVCC)
    • MVCC通过Undo Log实现。当某行数据被其他事务锁定时,可以从undo log中获取该行记录之前的数据版本,从而实现了快照读。
    • 快照读:读取历史版本的数据,不需要加锁,适用于普通SELECT操作。
    • 当前读:读取最新版本的数据,适用于执行修改语句或者特定的SELECT语句。
      • select … lock in share mode、select … for update

二、工作原理

在更新数据之前,MySQL会提前生成undo log日志,并且在事务提交之前不会立即删除undo log,以确保事务执行失败时可以进行回滚操作。而undo log日志的删除是通过后台的purge线程进行回收处理的。
29.jpg
事务A执行update更新操作时,会按照以下步骤进行:

  1. 将旧版本数据备份到对应的undo buffer中。
  2. 将undo buffer中的数据持久化到磁盘中的undo log文件中。
  3. 执行update操作,将新的数据持久化到磁盘。

在事务A执行的过程中,如果事务B对数据进行了查询,根据MySQL的MVCC机制,事务B会读取到数据的快照版本,即事务A更新之前的版本。这样可以保证事务B读取到的是一致的数据视图,即使事务A正在更新数据。

2.1 存储机制

为了保证事务并发操作时,在写各自的undo log时不产生冲突,InnoDB采用回滚段的方式来维护undo log的并发写入和持久化。
回滚段概述

  • InnoDB使用回滚段来维护并发事务的Undo Log写入和持久化。
  • 每个回滚段包含多个Undo Log Segment,是管理Undo Log的基本单位。
  • 回滚段数量:InnoDB拥有128个回滚段。
  • 每个回滚段中Undo Log Segment数量:每个回滚段包含1024个Undo Log Segment。
  • 支持的Undo操作数量:因此,InnoDB支持128 * 1024个Undo操作。

并发事务执行限制

  • 最多支持的并发事务数量:由Undo Log Segment数量决定,即128 * 1024。
  • 最大支持事务并发数计算:每个事务对应一个Undo Log,最多支持131072个并发事务执行。

事务示例

START TRANSACTION; -- 开启事务A

-- 执行更新操作
UPDATE table_name SET column_name = value WHERE condition;

COMMIT; -- 提交事务A

-- 开启另一个事务B
START TRANSACTION;

-- 执行查询操作
SELECT * FROM table_name WHERE condition;

COMMIT; -- 提交事务B

2.2 undo Log 的存储

事务 ID

事务执行过程中在对某个表执行增、删、改操作时,InnoDB就会给这个事务分配一个唯一的事务ID。
可以通过 information_schema.INNODB_TRX 来查询当前系统中运行的事务信息.

START TRANSACTION;
	select * from test1.a1;
commit;
--trx_id 就是事务ID,InnoDB 在内存维护了一个全局变量来表示事务ID,每当要分配一个事务ID时,就获取这个变量值,然后把这个变量自增1
select 
	trx_id , 
	trx_state ,
    trx_started,
    trx_isolation_level
from information_schema.INNODB_TRX;

行记录的隐藏列

InnoDB引擎管理的数据表中每行行记录,都存在着三个隐藏列
image.png

  • DB_ROW_ID : 如果没有为表显式的定义主键,并且表中也没有定义唯一索引,那么InnoDB会自动为表添加一个row_id的隐藏列作为主键。
  • DB_TRX_ID : 事务中对某条记录做增删改时,就会将这个事务的事务ID写入到trx_id中.
  • DB_ROLL_PTR: 回滚指针,指向undo log的指针

Insert 语句的 Undo Log 回滚日志结构

插入一条数据对应的undo操作其实就是根据主键删除这条数据就行了。
所以 insert 对应的 undo log 主要是把这条记录的主键记录上
image.png

  • start、end:指向记录开始和结束的位置。
  • 主键列信息:记录INSERT这行数据的主键ID信息,或者唯一列信息。
  • table id:表空间ID。
  • undo no:在当前事务中 undo log 的编号,从0开始。
  • undo type:undo log 的类型,insert语句的undo log类型是 TRX_UNDO_INSERT_REC

undo 回滚链

通过一个事物操作,我们一起来看一下回滚链的形成
image.png

三、相关参数

MySQL 与undo相关的参数设置:

mysql> show variables like '%undo%';
+--------------------------+------------+
| Variable_name            | Value      |
+--------------------------+------------+
| innodb_max_undo_log_size | 1073741824 |
| innodb_undo_directory    | ./         |
| innodb_undo_log_truncate | OFF        |
| innodb_undo_logs         | 128        |
| innodb_undo_tablespaces  | 0          |
+--------------------------+------------+

mysql> show global variables like '%truncate%';
+--------------------------------------+-------+
| Variable_name                        | Value |
+--------------------------------------+-------+
| innodb_purge_rseg_truncate_frequency | 128   |
| innodb_undo_log_truncate             | OFF   |
+--------------------------------------+-------+
  • innodb_max_undo_log_size
    • 表示每一个undolog对应的日志文件的最大值,默认最大值为1GB大小,默认初始化大小为10MB。
    • 日志文件达到该阈值之后,且参数 innodb_undo_log_truncate=ON,才会触发truncate回收(收缩)动作,被truncate后的表空间文件大小缩小到undolog表空间数据文件默认的1OMB大小。否则即便是到达最大值之后,也不会自动回收undolog的表空间。
  • innodb_undo_directory
    • 指定undo log日志的存储目录,默认值为 ./。
  • **innodb_undo_logs **
    • 在MySQL5.6版本之后,可以通过此参数自定义多少个rollback segment,默认值为128。
  • innodb_undo_tablespaces
    • 设置undo独立表空间个数,范围为0-128, 默认为0,0表示表示不开启独立undo表空间 且 undo日志存储在ibdata文件中。
    • 什么时候需要来设置这个参数 ?
      • 当DB写压力较大时,可以设置独立undo表空间,把undo从 ibdata文件中分离开来,指定 innodb_undo_directory 目录存放,可以制定到高速磁盘上,加快undo log 的读写性能。
  • innodb_undo_log_truncate
    表示是否开启自动收缩undolog的表空间的操作。如果配置为ON,并且配置了2个或2个以上的undolog表空间数据文件,当某一个日志文件大小超过设置的最大值之后,就会自动的收缩表空间数据文件。

在回收表空间数据文件的时候,被回收的表空间数据文件会临时下线,为了保证undolog一直有地方可以写,此时要保证至少还有1个undolog日志文件是在线的。这就是要求innodb_undo_tablespaces>=2的根本原因

### Mysql中binlogundolog和redolog日志功能及区别 #### binlog(二进制日志) binlogMySQL Server 层的日志,记录了数据库的逻辑操作,例如 `INSERT`、`UPDATE` 和 `DELETE` 等语句。它以逻辑日志的形式存储,记录的是 SQL 语句的原始逻辑[^1]。 - **功能**: - 主要用于主从复制,从库通过读取主库的 binlog 来实现数据同步[^2]。 - 可用于数据恢复,当数据库发生故障时,可以通过重放 binlog 来恢复数据[^4]。 - **刷盘时机**: - `sync_binlog` 参数控制 binlog 的刷盘行为,建议设置为 1,即每次事务提交时都将 binlog 写入磁盘,以保证异常重启后日志不会丢失[^4]。 - **格式**: - 支持三种格式:`STATEMENT`、`ROW` 和 `MIXED`。`ROW` 格式记录每一行的变化,而 `STATEMENT` 格式记录执行的 SQL 语句。 --- #### redo log(重做日志) redo log 是 InnoDB 存储引擎层的日志,记录了数据页的物理变化,属于物理日志[^3]。 - **功能**: - 主要用于崩溃恢复。当数据库因意外宕机或介质故障而需要恢复时,redo log 能够确保未写入磁盘数据能够被重新应用,从而保证数据的一致性和完整性。 - **记录形式**: - 记录的是数据页的物理变化,而非具体的 SQL 操作。例如,某一行数据从 A 值更新为 B 值,redo log 会记录这一变化的详细信息[^2]。 - **写入方式**: - redo log 是循环写入的,其日志空间大小是固定的。当一个日志文件写满后,会切换到下一个日志文件,形成循环使用。 --- #### undo log(回滚日志undo log 同样是 InnoDB 存储引擎层的日志,主要用于事务的回滚以及多版本并发控制(MVCC)。 - **功能**: - 在事务执行过程中,如果需要回滚,undo log 提供了撤销操作的能力。例如,某条记录被更新后,undo log 会保存该记录的旧版本,以便在需要时恢复旧值[^2]。 - 支持 MVCC,允许多个事务同时读取不同版本的数据,而不会相互干扰[^1]。 - **记录形式**: - 记录的是事务执行前的数据状态,与 redo log 不同,undo log 是逻辑日志[^2]。 --- #### 区别总结 | 日志类型 | 层级 | 功能 | 记录形式 | 使用场景 | |------------|--------------|--------------------------|----------------|------------------------------------| | binlog | MySQL Server | 数据恢复、主从复制 | 逻辑日志 | 数据同步、故障恢复 | | redo log | InnoDB 引擎 | 崩溃恢复 | 物理日志 | 数据库异常宕机后的数据一致性恢复 | | undo log | InnoDB 引擎 | 事务回滚、MVCC | 逻辑日志 | 回滚操作、支持并发读 | --- ### 示例代码:查看 binlog 文件内容 ```bash # 查看当前 binlog 文件列表 SHOW MASTER LOGS; # 查看指定 binlog 文件的内容 mysqlbinlog /var/lib/mysql/binlog.000001; ``` --- ###
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值