MySQL运维系列 之 如何监控大事务

最新推荐文章于 2025-07-30 21:24:29 发布
最新推荐文章于 2025-07-30 21:24:29 发布
阅读量1.2k 收藏
点赞数
本文探讨了在MySQL 5.7.22版本中，长时间运行的大事务如何影响数据库性能。具体分析了事务长时间不提交、SQL执行缓慢及会话处于等待状态等问题，并提供了InnoDB存储引擎下这些问题的特征及解决思路。

long transaction

背景

大家有没有遇到这样的情况

  1. 某个SQL执行特别慢，导致整个transaction一直处于running阶段
  2. 某个Session的SQL已经执行完了，但是迟迟没有commit，一直处于sleep阶段
  3. 某个Session处于lock wait阶段，迟迟没有结束

以上，大部分原因都是大事务导致的，接下来我们好好聊聊相关话题

关键字

  • 环境
1. MySQL5.7.22

    低版本MySQL这边不再考虑，就像还有使用SAS盘的公司一样，费时费力，MySQL5.7+ 标配

2. InnoDB存储引擎

3. CentOS 6
  • 大事务的相关特征
1. transaction开启到结束的时间非常长，我们这边举例为10s
2. 正在执行的事务
3. 未提交的事务

实战


>>>阅读全文

sweetfire
关注
MySQL 查看指定时间范围内的大事务
敖尔其楞的专栏
07-30 634
代码地址：https://github.com/baixiaoyu/dbascripts/blob/main/bigtrx.py 这个脚本能获取指定时间内的大事务信息。分别通过大小，影响行数及执行时间进行排序输出。输出的结果中有获取指定事务的命令，在排查大事务方面比较方便。 输出结果实例： ------order by rows------- trx 61824725984 start at:2021--06--17 12:23:06 from line: 4104 to line: 4515 has 8
MySql运维篇
a17783481239的博客
04-17 2079
mysqldump -p'#A123321000a' --all-databases --single-transaction --master-data=2 --flush-logs > `date +%F`-mysql-all.sql # 导出数据库的备份，使用密码#A123321000a，采用单个事务导出，生成带有日期的文件名。#将从服务器中临时目录中的数据同步到mysql中。vim 2024-03-07-mysql-all.sql #此步在主服务器操作，将显示的数据添加到从服务器中。
MySQL如何查询大事务
m0_66522805的博客
09-25 763
select * from information_schema.innodb查看trx_rows_modified列显示事务影响了多少行数判断。1.通过information_schema.innodb_trx。2.mysql8.0以后通过解析mysql binlog查看。
MySQL之事务
最新发布
07-30 699
Mysql中事务的介绍，事务的原理、特性、隔离级别、MVCC
mysql大事务查询_MySQL连接查询和事务
weixin_30141859的博客
02-03 469
=================================连接查询=======================================1.接连查询: 同时查询多个表中的数据SELECT * FROM 表名1,表名2… WHERE 连接条件;连接查询如果不加连接条件，结果是一个笛卡尔积：(a,b,c)(1,2,3) –> (a1,a2,a3,b1,b2,b3,c1,c2,c3...
mysql如何查看大事物_MySQL如何监控大事务
weixin_29732737的博客
01-28 1206
MySQL如何监控大事务查看正在执行的事务select * from sys.processlistshow processlistselect * from information_schema.processlistselect * from sys.sessionselect * from information_schema.innodb_trx;select * from perform...
MySQL数据库运维的五大指标 数据库运维.pdf
04-19
"MySQL数据库运维的五大指标" MySQL数据库运维的五大指标是评估数据库运维水平的重要指标。这些指标包括数据安全、无故障时间、响应时间、吞吐量和资源利用率等。 1. 数据安全 数据安全是数据库运维的首要任务。...
MySQL学习资料.zip，包括MySQL基础、进阶、运维
09-04
本压缩包包含了三份核心的资料文件，分别是“MySQL-基础篇.pdf”、“MySQL-进阶篇.pdf”和“MySQL-运维篇.pdf”，涵盖了MySQL学习的三个重要阶段：基础知识、进阶技能和系统运维。 在“MySQL-基础篇.pdf”中，学习...
MySQL运维实战秘诀
04-29
MySQL运维实战秘诀主要涵盖了一系列关于如何有效管理和维护MySQL数据库系统的专业知识和实践经验。MySQL作为全球最受欢迎的开源关系型数据库管理系统之一，其高效、稳定和可扩展性使得它在各种规模的企业和项目中...
MySQL文档资料，文档包含三个部分：基础、进阶、运维
05-31
MySQL是世界上最受欢迎的关系型数据库管理系统（RDBMS）之一，被广泛应用于各种规模的企业和项目中。本套文档资料详细地涵盖了MySQL的基础、进阶和运维三个方面，旨在为用户提供全面的MySQL学习路径。 首先，我们来...
深入了解mysql长事务
12-14
前言： 本篇文章主要介绍MySQL长事务相关内容，比如说我们开启的一个事务，一直没提交或回滚会怎样呢，出现事务等待情况应该如何处理，本篇文章将给你答案。 注意：本篇文章并不聚焦于谈论事务隔离级别以及相关特性。而是介绍长事务相关危害以及监控处理方法。本文是基于MySQL5.7.23版本，不可重复读(RR)隔离级别所做实验。(语句为\G可以使查询结构显示更易读，但只可以在mysql命令行使用。) 1.什么是长事务 首先我们先要知道什么是长事务，顾名思义就是运行时间比较长，长时间未提交的事务，也可以称之为大事务。这类事务往往会造成大量的阻塞和锁超时，容易造成主从延迟，要尽量避免使用长事务。
Mysql查询正在执行的事务以及等待锁的操作方式
12-16
使用navicat测试学习: 首先使用set autocommit = 0;(取消自动提交,则当执行语句commit或者rollback执行提交事务或者回滚) 在打开一个执行update 查询 正在执行的事务： SELECT * FROM information_schema.INNODB_TRX 根据这个事务的线程ID（trx_mysql_thread_id）: 从上图看出对应的mysql 线程：一个94362 （第二个正在等待锁）另一个是93847(第一个update 正在执行 没有提交事务) 可以使用mysql命令：kill  线程id       杀掉线程 期间如果并未杀掉
MySQL为什么要避免大事务以及大事务解决的方法
12-14
什么是大事务 运行时间比较长，长时间未提交的事务就可以称为大事务 大事务产生的原因 操作的数据比较多 大量的锁竞争 事务中有其他非DB的耗时操作 。。。 大事务造成的影响 并发情况下，数据库连接池容易被撑爆 锁定太多的数据，造成大量的阻塞和锁超时 执行时间长，容易造成主从延迟 回滚所需要的时间比较长 undo log膨胀 。。。 如何查询大事务 **注**：本文的sql的操作都是基于mysql5.7版本 以查询执行时间超过10秒的事务为例： select \* from information\_schema.innodb\_trx where TIM
mysql8查看大事务
qq_39839075的博客
06-11 3671
所以我们要通过mysql的其他表查询这个大事务的详情，尤其是大事务的sql语句，进而知道是在做什么业务。大事务的特点是执行时间长，长期占有锁不释放，导致其他想操作同一行数据的线程阻塞，如果客户端设置了超时时间，超时后，客户端进行重试，又会申请一个mysql线程，然后再阻塞，最终会造成整个mysql库的线程枯竭，整个mysql库不可用，危害极大。至此，我们就得到了大事务的sql语句，接下来，可以根据sql语句对应一下业务模块，进而得出这个大事务能不能kill。很简单，就搞一张表，一个主键，一个业务字段。
mysql运维监控
chagaostu的专栏
03-09 1099
我们的mysql生产库会突然变慢。原因大概是有人在生产库上进行了大数据的查询或者有死锁。 虽然开启了slow sql日志，但一旦生产库变慢往往连一些原本很快的sql都会被拖累至变慢。 所有的sql文都进了slow sql日志，记录变得毫无意义。所以考虑在mysql生产库开始变慢的初期阶段把当时执行的sql 和死锁事物记录下来，以便分析。 为了侦查mysql生产库的变慢需要添加一个zabbix
mysql大事物监控_监控一个大事务的回滚
weixin_39840606的博客
02-18 341
我们在大的事务失败时往往面临长时间的回滚，在回滚期间表会被加以TM-3 SX sub-exclusive锁，此时一般我们是无法针对表实施DDL操作的。长时间的大事务回滚可能耗尽我们的耐心，不过我们还是有办法预估何时回滚能够完成的，参考中的脚本中的脚本，注意该脚本需要访问x$ktuxe内部视图，所以需要以sysdba身份方能执行。SQL> select * from v$lock where ...
mysql 大 事务 排查_mysql事务排查
weixin_39607090的博客
02-27 149
2019独角兽企业重金招聘Python工程师标准>>> show full processlist展示所有线程show engine innodb status展示状态如：MySQL thread id 74048436, OS thread handle 0x7ff1f920a700, query id 965762090 10.37.18.76 daojia_root cle...
mysql 大事务_MySQL 5.6大查询和大事务监控脚本(Python 2)
weixin_39541189的博客
01-18 163
可以配置在Zabbix里面，作为监控的模版#!/usr/bin/envpython#importMySQLdb,MySQLdb.cursorsimportsys,timefromdatetimeimportdatetimeinnodb_lock_output_file='/tmp/innodb_lock_output.log'#socket_dir='/var/lib/mys...
2017年6月MySQL运维核心资料揭秘
在"MySQL运维内参2017.6.1.pdf"文档中，我们可以期望找到对上述知识点的详细阐述，包括但不限于MySQL的基础知识、运维最佳实践、性能调优方法、监控与故障处理流程、安全性和备份恢复机制、高可用架构设计思路，以及...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值