online ddl 锁表问题

最新推荐文章于 2024-11-18 10:29:09 发布

weixin_30920091

最新推荐文章于 2024-11-18 10:29:09 发布

阅读量178

点赞数

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/adealjason/p/8514697.html

本文为一篇转载文章示例，展示了如何从一个博客平台转载到另一个平台的方法。虽然内容为空，但可以用于了解博客转载的基本格式。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

https://www.cnblogs.com/mysql-dba/p/6192897.html

转载于:https://www.cnblogs.com/adealjason/p/8514697.html

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_30920091

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

MySQL Online DDL底层的几种实现方式？

qq_36929638的博客

03-28

979

通过合理选择算法和锁策略，Online DDL可以在保证业务连续性的同时完成表结构变更。

MYSQL online ddl 运维手册

sinat_23447919的博客

06-15

386

以下运维依据数据库版本 MYSQL 8.0.18。 1 DDL操作 MYSQL DDL 操作不当会造成锁表，以下依据常用DDL操作进行运维说明，规避锁表。 1.1 online-ddl注意事项 1.1.1 临时空间占用 inplace算法添加方式会占用—tmpdir参数所指空间。临时排序文件会存储在这个文件夹下。 1.1.2 内存占用 DDL创建期间的DML操作产生数据会占用innodb_sort_buffer_size，最大可占用值为innodb_online_alter_log_max_size。超出

参与评论您还未登录，请先登录后发表或查看评论

查询很慢会导致锁表吗_MySQL Online DDL导致全局锁表案例分析

weixin_30014783的博客

01-04

987

MySQL Online DDL导致全局锁表案例分析我这边遇到了什么问题?线上给某个表执行新增索引SQL, 然后整个数据CPU打到100%, 连接数暴增到极限, 最后导致所有访问数据库的应用都奔溃.SQL如下:ALTER TABLE `book` ADD INDEX `idx_sub_title` (`sub_title` ASC);能看到什么?'10063293', 'root', '10.0...

Online DDL锁表时间优化

sunashe的个人随笔

08-05

909

online DDL指的是DDL执行期间的绝大部门内部处理工作不阻塞DML操作，但是在某些阶段还是会影响。对于可以采取online操作的ddl操作，其锁表累计时间主要由DDL期间的DML操作数量，以及参数值innodb_sort_buffer_size。先看波儿测试测试如下： innodb_sort_buffer_size | 67108864 [ 51s] th...

mysql-onlineddl

chxdyingpin的博客

08-13

223

一、pandas是什么？示例：pandas 是基于NumPy 的一种工具，该工具是为了解决数据分析任务而创建的。二、使用步骤 1.引入库代码如下（示例）： import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns import warnings warnings.filterwarnings('ignore') import ssl ssl._create_default_

mysql各版本online ddl

sinat_41780498的博客

04-18

712

发展历程 MySQL Online DDL 功能从 5.6 版本开始正式引入，发展到现在的 8.0 版本，经历了多次的调整和完善。本文主要就 Online DDL 的发展过程，以及各版本的区别进行总结。其实早在 MySQL 5.5 版本中就加入了 INPLACE DDL 方式，但是因为实现的问题，依然会阻塞 INSERT、UPDATE、DELETE 操作，这也是 MySQL 早期版本长期被吐槽的原因之一。在 MySQL 5.6 中，官方开始支持更多的 ALTER TABLE 类型操作来避免数据拷贝，同

你知道什么是 MySQL Online DDL 吗？

Fuxing's Notes

05-14

2878

MySQL 在进行 DDL 操作时，可能会产生表锁导致阻塞，影响用户的 DML 操作，而 Online DDL 指的是在 DDL 期间，允许用户进行 DML 操作。本文将详细讲解 MySQL 各版本的 Online DDL。

MySQL扩展varchar字段长度能否Online DDL

DBdoctor_off的博客

11-18

985

面对Online DDL的众多场景，DBdoctor免费的SQL审核功能可以快速识别Online DDL，支撑线上DDL变更，有效预防锁表问题，欢迎小伙伴们下载体验！在MySQL 5.6 版本之前，所有的DDL变更都需要锁表，导致大量线程处于“Waiting for meta data lock”的状态，5.6版本引入Online DDL新特性，部分DDL 变更不需要锁表，引入算法In-Place和Copy（8.0增加Instant），其中 Instant，In-Place可以实现无锁变更。

MySQL系列---Online DDL

lipviolet的博客

10-13

2210

适用于mysql的5.7及以上的版本：增加、删除索引不会锁表，且删除索引速度非常快，即使表很大的情况下，无关CREATE INDEX语句还是ALTER TABLE语句，CREATE INDEX的内部执行逻辑也是ALTER TABLE。无限制条件的update语句也不会锁表：UPDATE jml_qrcode SET aaa = ‘22’;它的执行逻辑应该是逐行修改，总之不会锁表，最多锁行。修改字段默认值及修改字段限制也不会锁表，应该都是逐行；

MySQL Online DDL，还是要谨慎

老叶茶馆

07-28

3949

导读MySQL的Online DDL长期饱受诟病，8.0之后有没有好一些呢...本文重点讨论常见的几种Online DDL需求：增加新列（ADD COLUMN）修改列定...

MySQL 5.6版本新特性之Online DDL：在线变更表结构且不阻塞数据库服务

梦~'

07-09

2355

一、Online DDL 产生背景：二、DDL实现方式及原理：三、Online DDL 实现：Prepare 阶段、DDL 执行阶段、Commit 阶段四、建议：五、常见问题

【MySQL】Online DDL详解

热门推荐

http://DBAtao.cn/

06-18

1万+

我这一个表有1T的数据，这时我想给这个表加一个列，如果才能最大程度不影响业务呢？

Mysql 【锁】

qq_40662405的博客

06-20

609

表锁是指上锁的时候锁住的是整个表，当下一个事务访问该表的时候，必须等前一个事务释放了锁才能进行对表进行访问；表锁级别的两种锁：表锁表锁的语法是 lock tables … read/write原数据锁 MDL （metadata lock）server 层级别的锁。主要用于隔离DML和DDL操作之间的干扰。执行DML，需要申请 MDL 读锁执行DDL，需要申请 MDL 写锁给一个表加字段，或者修改字段，或者加索引，需要扫描全表的数据。在对大表操作的时候，你肯定会特别小心，以免对线上服务造成影响

详谈 MySQL Online DDL

huiyunfei的博客

09-26

3935

作为一名DBA，对数据库进行DDL操作非常多，如添加索引，添加字段等等。对于MySQL数据库，DDL支持的并不是很好，一不留心就导致了全表被锁，经常搞得刚入门小伙伴很郁闷又无辜，不是说MySQL支持Online DDL么，不是说不会锁表的么？是的，令人高兴的是从MySQL5.6开始就支持部分DDL Online操作了，但并不是全部喔，今天这里就对我们常用的DDL进行总结和说明，让操作DDL的小伙伴从此做到心中有数，得心应手，让老板们再也不用担心我们做DDL咯。我自己遵守的一条黄金准则：DDL永远不要在业

mysql ddl是否会锁表的问题

linqi的博客

05-12

2460

今天和同事讨论mysql在线ddl是否会锁表的问题，查了下资料 Mysql在5.6版本之前，直接修改表结构的过程中会锁表，具体的操作步骤如下：（1）首先创建新的临时表，表结构通过命令ALTAR TABLE新定义的结构（2）然后把原表中数据导入到临时表（3）删除原表（4）最后把临时表重命名为原来的表名具体ddl如何工作 Mysql 5.6 虽然引入了Online DDL，但是并不是修改表结构的时候，一定不会导致锁表，在一些场景下还是会锁表的，比如 ①某个慢SQL或者比较大的结果集的SQL在..

在线DDL修改varchar字段属性时不锁表

Data & Analysis

06-12

2244

《MySQL管理之道：性能调优、高可用与监控（第2版）》第2章MySQL 5.7与MariaDB 10.1的新特性，本章主要讲解MySQL 5.7 和 InnoDB 的一些增强性能，这些增强性能极大地提高了系统和MySQL的性能。本节为大家介绍在线DDL修改varchar字段属性时不锁表。 2.3.2　在线DDL修改varchar字段属性时不锁表 MySQL 5.7针对DDL功能做了加强，修改...

5分钟了解MySQL5.7的Online DDL雷区

weixin_33912453的博客

09-23

831

Part1:写在最前Online DDL，当新手听到这个名字的时候，非常高兴，以为无论什么情况下，修改表结构都不会锁表，理想很丰满，现实很骨感！读完本文，教你如何避开这些雷区，安全的修改表结构。话不多说，我们分别来看下MySQL5.6和MySQL5.7在修改表结构上的相同和异同。Part2:5.6.25的表现①首先我们构造数据并进行测试mysql> create database helei...

MySQL 5.7.32 Online ddl使用注意事项

sinat_36757755的博客

04-03

2203

MySQL从5.6开始有了Online ddl功能，有效的解决了DDL操作的痛点，特别是针对一些大表的DDL操作，大幅度的减少ddl操作对应用的影响，但 Online ddl不是一个完美的功能，它仍然会对数据库产生影响，所以我们需要了解使用Onlineddl的注意事项。

mysql的online ddl

最新发布

08-22

<think>我们正在讨论MySQL的在线DDL功能。根据引用内容，MySQL Online DDL允许在修改表结构的同时保持数据库的可用性，这对于生产环境非常重要。让我们逐步解析其原理和使用方法。 ### 一、MySQL Online DDL原理引用[1]提到MySQL Online DDL的工作机制包括准备阶段和执行阶段： 1. **准备阶段**： - 检查与评估：验证DDL语法、用户权限以及资源需求。 - 选择执行策略：根据操作类型和表结构，决定使用COPY、INPLACE或INSTANT算法。 2. **执行DDL操作**： - **COPY算法**（传统方式）：创建临时表，复制原表数据并应用修改，期间阻塞写操作（早期DDL方式）。 - **INPLACE算法**（原地重建）：避免复制整个表，而是在原表上重建。多数情况下允许并发DML操作（需重建表）。 - **INSTANT算法**（MySQL 8.0+）：仅修改元数据，不涉及数据复制或重建，适用于添加列等操作（秒级完成）。引用[3][4]补充： - Online DDL在5.6版本引入，通过行日志(row log)记录DDL期间的DML操作，并在最后应用这些变更，确保数据一致性。 - 不同DDL操作的支持情况（算法、是否锁表）取决于MySQL版本和操作类型。例如： - 添加索引：通常支持INPLACE（并发DML） - 删除列：可能重建表（INPLACE但耗时较长） ### 二、使用方法与注意事项 1. **语法示例**： ```sql -- 添加索引（INPLACE算法） ALTER TABLE tbl_name ADD INDEX idx_name (col), ALGORITHM=INPLACE, LOCK=NONE; -- 添加列（INSTANT算法，8.0+） ALTER TABLE tbl_name ADD COLUMN col INT, ALGORITHM=INSTANT; ``` 2. **关键参数**： - `ALGORITHM`：指定算法（`COPY`/`INPLACE`/`INSTANT`），建议由MySQL自动选择。 - `LOCK`：控制并发级别（`NONE`/`SHARED`/`EXCLUSIVE`），推荐`LOCK=NONE`允许并发DML。 3. **注意事项**： - **版本兼容性**：INSTANT算法仅限MySQL 8.0以上版本。 - **空间要求**：INPLACE算法需要额外磁盘空间（约为原表大小）。 - **长事务风险**：DDL执行期间若有未提交的长事务，可能导致元数据锁（MDL）等待。 - **监控进度**：MySQL 8.0+可通过`performance_schema`监控DDL进度。 ### 三、替代方案（引用[4]）当原生Online DDL无法满足需求时，可使用第三方工具： - **pt-online-schema-change**（Percona）：通过触发器同步增量数据，需创建临时表。 - **gh-ost**（GitHub）：模拟从库读取binlog同步数据，无需触发器，降低主库负载。 > **总结**：MySQL Online DDL是数据库结构变更的核心技术，合理选择算法和参数可最大限度减少业务中断。对于关键操作，建议先在测试环境验证。 §§相关问题§§ 1. MySQL Online DDL中COPY、INPLACE、INSTANT三种算法的具体适用场景是什么？ 2. 如何监控MySQL Online DDL的执行进度和影响？ 3. 在MySQL 5.7版本中，哪些常见的DDL操作支持`LOCK=NONE`（允许并发DML）？ 4. 使用pt-online-schema-change或gh-ost工具时，如何避免对主库性能造成影响？</think>### MySQL Online DDL 原理与使用详解 #### **一、核心原理** 1. **工作流程** - **准备阶段** MySQL 检查语法、权限、资源，并基于操作类型（如加索引/改字段）自动选择算法：`COPY`、`INPLACE` 或 `INSTANT`[^1]。 - **执行阶段** - **COPY 算法**（传统）：创建临时表复制数据，全程锁表（阻塞读写）[^3]。 - **INPLACE 算法**：原地修改数据文件，**允许并发 DML 操作**（需重建表时短暂阻塞写）[^1][^3]。 - **INSTANT 算法**（MySQL 8.0+）：仅修改元数据（如加列），秒级完成且**不阻塞读写**[^1]。 2. **数据一致性保障** - 通过 **行日志 (row log)** 记录 DDL 期间的 DML 操作，最后应用增量变更[^3][^4]。 - 元数据锁（MDL）确保 DDL 开始时无活跃事务[^4]。 #### **二、使用方法** 1. **语法示例** ```sql -- 显式指定算法（推荐） ALTER TABLE users ADD COLUMN age INT, ALGORITHM=INPLACE, -- 可选值：INPLACE/COPY/INSTANT LOCK=NONE; -- 并发控制：NONE/SHARED/EXCLUSIVE ``` 2. **关键操作支持** | 操作类型 | 支持算法 | 是否锁表 | |----------------------|-------------------|------------------| | 加索引 | INPLACE (Online) | LOCK=NONE 时无锁 | | 删列/改列类型 | INPLACE (Rebuild) | 短暂写阻塞 | | 加列（MySQL 8.0+） | INSTANT | 全程无锁 | | 改表注释 | INSTANT | 全程无锁 | 3. **注意事项** - **版本依赖**：`INSTANT` 仅限 MySQL 8.0+；`INPLACE` 需 5.6+。 - **空间要求**：`INPLACE` 需要额外磁盘空间（约 1.2 倍原表大小）。 - **风险操作**：主键修改、数据类型转换可能强制使用 `COPY` 算法[^3]。 #### **三、替代方案（原生 DDL 不适用时）** 1. **第三方工具** - **pt-online-schema-change**（Percona）：通过触发器同步增量数据，需创建临时表[^4]。 - **gh-ost**（GitHub）：模拟从库读取 binlog 同步数据，无需触发器，对主库压力更小[^4]。 > **总结建议**：优先使用原生 Online DDL（指定 `ALGORITHM=INPLACE, LOCK=NONE`），大表操作或低版本 MySQL 可选用 gh-ost 工具。