一次Mysql连接慢故障排查案例

数据库故障排查指南:从通用流程到MySQL、Oracle实战解析 建立标准化流程:遵循“黄金六步法”,避免盲目操作。工具赋能效率:结合Prometheus、ELK等实现自动化监控。定期容灾演练:模拟数据中心级故障,验证恢复流程(季度执行)。知识库沉淀:记录历史故障及解决方案,形成团队知识资产。通过系统性排查思维与工具链支撑,可显著降低数据库故障的MTTR(平均修复时间),保障业务高可用。MySQL性能优化全解Oracle灾难恢复手册。 阅读详情

背景

某企业开发环境用户反应,在相同的机房,相同网段,不同IP地址的mysql服务器,相同访问,一个响应很快,一个明显的慢。

纳闷之余,网深科技工程师帮其分析了原因。

分析之前,先约定一下,以下对响应快的简称“很快”,响应慢的简称“很慢”吧。

故障复现

在查看了用户使用mysql连接测试这一操作的演示,的确存在诸如用户的描述的现象。如下:

从用户操作层面,的确存在明显快慢差别,后者让人无法接收,“很慢”的确很慢。

问题分析

接下来, 进入信息采集,侦察分析阶段。

客户端抓包分析

在客户端电脑,分别采集了很快和很慢以上操作的报文信息。结论如下。

我是很快客户端的报文

从很快客户端数据看,三步握手后,服务器更新了一下窗口,然后在0.05秒后返回了数据库版本信息。继而后续交换较快,整个连接持续1.2秒时长。

我是很慢客户端的报文

下面看一下很慢同学的表现。

同样,三步握手后,服务器更新了一下窗口信息。

接下来发生了一个异常现象,服务器在22秒后,才发送过来版本信息。

整个连接时长约27秒。

通过比较看到,很慢同学的确很慢。相同操作一个是1.2秒,一个是27秒。

服务器端抓包分析

从上述分析看到,很慢同学网络连接建立时间很快,慢的主要原因是服务器响应回来的信息时间太长。

那么,站着服务器角度,比较分析一下,是否可能由于某些网络因素导致了很慢的存在。

我是很快服务器的报文

在很快服务器上采集数据,从下图看到,第四个未携带数据的ack更新窗口包和第五个payload报文(数据库版本信息)之间时间差约0.008秒。

我是很慢服务器的报文

同样,在很慢服务器上,更新窗口包和数据库版本包之间,时间差约22秒。的确很慢。

抓包分析结论

通过上述在客户端和服务器端的对比分析看到,很慢同学慢的原因是,服务器本身发出报文的时间很长,约22秒。

因此,通过抓包分析的结论是,很慢的原因是服务器的原因,与网络无关。

进一步问题分析

一般情况下,如果是网络运维部门,问题分析到这里,基本就可以停止了,然后理直气壮的把球踢给系统部门,哼,这问题不是我的原因。

而网深科技的技术人员,为了表现出自己的真才实学,带着打破砂锅问到底精神,还想进一步探索,为什么会有这种现象出现?

于是,有了进一步问题分析的环节。

细节决定成败。

在前面服务器抓包分析中,从服务器本身抓包信息来看,服务器本身的IP地址并没有显示为数字格式。与mysql通讯的地址显示如下。

很快:demo.cloudinside.com.cn.mysql

很慢:Dev1.NAPM.mysql

既然发现了2者的不同之处,先使用简单的ping命令,尝试一下,看看返回结果。

从最简单的ping着手,以下是在2台服务器内部ping的结果。

我是很快服务器的ping

很快同学ping结果很快出现,名称解析失败,结果是Unknown host,如下图。

我是很慢服务器的ping

很慢同学ping结果很慢出现,约20秒。结果是Host name lookup failure,主机名解析失败。

从DNS配置信息入手,下面检查2台服务器DNS配置信息。

我是很快服务器的DNS

查看很快服务器DNS,显示有多个namesever。

我是很慢服务器的DNS

但很慢服务器的DNS却没有配置,如下。

解决问题

通过上述分析,已找到很快和很慢两者的差异。下一步,尝试解决问题,通过给很慢配置DNS信息,再做一下ping操作,看看结果。

很慢服务器配置DNS

为很慢服务器配置DNS信息,内容与很快服务器一样。

如下图。

很慢服务器ping操作

接下来,再操作一次ping命令。

发现很快返回信息,结果和很快服务器一样,为Unknow host。

问题验证

通过上述分析和配置后,再次对很慢同学进行mysql连接测试,速度飕飕的,它终于不再饱受埋怨了。

以下是很慢成为了很快的见证。

整个连接时长1.13秒。

问题解决。

【MySQL 数据库故障排查全攻略】从基础诊断到性能优化(附实战案例与工具指南) 《MySQL 全场景故障排查与优化手册》是一份针对 MySQL 数据库常见问题的全面指南,涵盖了连接层、存储层、复制层和优化层四大核心维度的故障排查与优化策略。手册提供了从基础到进阶的详细步骤,包括连接失败的七种场景、启动失败的十大原因、慢查询优化的五个层次、锁问题的六种典型场景、主从复制延迟的八种根源以及数据不一致的七种修复方案。此外,手册还介绍了数据误删的三种恢复方式,帮助技术团队快速定位和解决 MySQL 数据库中的各类问题,确保系统的高效稳定运行。 阅读详情

相关推荐

mysql——常见故障排查分析

一、MySQL 单实例故障排查 故障现象1 ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/data/mysql/mysql.sock' (2) 问题分析 以上这种情况一般都是数据库未启动或者数据库端口被防火墙拦截导致。 解决方法:启动数据库或者防火墙开放数据库监听端口。 故障现象2 ERROR 1045 (28000): Access denied for user 'root'@'localhost' (

weixin_47221433的博客 1375

mysql: 访问连接慢原因分析

解决这些问题通常需要对MySQL服务器的配置、网络环境和硬件资源进行综合考虑和调优。如果问题仍然存在,可能需要进一步分析日志文件或使用专业的监控工具来诊断问题。:如果MySQL服务器配置为使用域名而非IP地址,DNS解析可能导致延迟。:高负载可能导致服务器响应慢。可以检查CPU和内存使用情况,优化查询,或升级硬件。:网络问题可能导致连接慢。可以考虑使用更快的硬盘或优化磁盘使用。:如果启用了SSL,建立连接时的加密和解密过程可能会增加延迟。:可能存在许多挂起的或未正确关闭的连接。,确保它们被设置为合理的值。

十年运维开发经验的王义杰在此分享自己的知识和经验 2945

故障排查之局域网内通过nginx代理下载文件慢

收到同事反馈从内外文件下载速度很慢,只有几十KB的下载速度。我第一反应是不太可能,于是自己要过来下载地址。了解信息后知道是内网服务器搭建了nginx服务,通过nginx反向代理后,通过浏览器下载软件包。我自己通过浏览器首先下载了一个小文件,很快就下载完了,速度很快,有几十MB/s。又下载一个超2GB的大文件,发现下载速度开始很快,迅速下降,很快就降到100KB/s以下,然后就稳定在几十KB/s的下载速度。

月生的静心苑 2012

mysql 访问连接慢原因分析_mysql数据库连接很慢

感兴趣的新人,都欢迎扫码加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!2、在工作中,运维人员经常需要跟运营人员打交道,请问运营人员是做什么工作的?6、Squid、Varinsh和Nginx有什么区别,工作中你怎么选择?5、LVS、Nginx、HAproxy有什么区别?9、讲述一下Tomcat8005、8009、8080三个端口的含义?7、Tomcat和Resin有什么区别,工作中你怎么选择?15、讲述一下LVS三种模式的工作过程?11、什么叫网站灰度发布?

2301_78398209的博客 3557

MySQL中MHA故障排查

mysql主从复制,故障切换排查

2301_81272194的博客 1373

同一个mysql数据库,不同的服务器连接,速度不同

同一个mysql数据库,不同的服务器连接,速度不同 最近业务人员在部署线上业务站点的时发现有一台服务器的站点访问数据库特别慢,但是其他服务器访问缺没有出现慢的情况,得知情况之后首先是考虑源服务器区别,是不是网络有问题 或者是不是执行sql不同导致的,经过排查都排除了这两种可能,然后就想到了mysql的skip-name-resolve参数 是不是因为这个导致的呢?上去mysql一看真的没有配置这个...

专注于编程、AI、人工智能等多个领域内容研究和分析 4193

解决MySQL打开或创建连接慢的问题

需要注意的是,关闭 DNS 解析功能可能会影响 MySQL 的某些功能,例如基于主机名的授权、基于主机名的日志记录等。因此,在关闭 `skip-name-resolve` 参数之前,需要仔细评估其对系统的影响,并采取相应的措施来保证系统的稳定性和安全性。当 `skip-name-resolve` 参数被设置为 `ON` 时,MySQL 将不再对客户端连接的主机名进行 DNS 解析,而直接使用客户端连接中的 IP 地址进行连接。如果需要关闭客户端的 DNS 解析功能,需要在客户端的配置文件中进行相应设置。

dreamofheart1的博客 2094

京东风控算法工程师带你解读Action Model-精细化运营(上篇)

电影《蝴蝶效应》中,男主拥有回到童年改变过去的能力,虽然在剧中男主一次次穿越时空拯救世界,但由于他无法预见自己做出的抉择对未来产生的其他影响,最终还是没能阻止悲剧的发生。可见,一个好的决策需要衡量其对未来产生的影响。JDD风控算法团队本期为大家解惑最优决策难题的解决方法-Action Model。

JDD风控算法的博客 1917

mysql客户端连接很慢的解决办法

一般我们连接mysql,要么是通过终端直接连接,要么是使用navicat 这种软件连接,有时候会发生连接很慢的情况,大致分三种 1.远程连接mysql很慢,每次连接需要3秒及以上 原因是: 当远程访问mysql时, mysql会解析域名, 所以会导致访问速度很慢, 会有2,3秒延时! 解决办法: 修改mysql安装目录下的my.cnf,加上下面这个配置可解决此问题。在[mysqld]下加入:skip-name-resolve 保存退出后重启mysql服务。 然后访问速度就和本地一样快啦。 2.发现链接数据库

Debug-123 8211

windows10系统上安装最新版mysql 8.0详细步骤

windows10系统上安装最新版mysql 8.0详细步骤

glei20的博客 6718

Altium Designer铺铜陷阱:为什么你的死铜总是清除不干净?

本文深入探讨Altium Designer中铺铜操作导致死铜无法清除的常见问题,分析死铜形成的五大诱因,并提供高级参数优化和网络连接性验证技巧。通过调整边界计算精度和泪滴算法设置,有效解决死铜残留问题,提升PCB设计质量与制造良率。

weixin_29169505的博客 359

MySQL故障排查与生产环境优化

前言MySQL 是目前企业最常见的数据库之一,占用绝大部分市场份额。在日常维护管理的过程中相信大家肯定会遇到很多常见的故障。为了提高故障处理的及时性,本章案例将常见故障进行汇总,增长学习经验。生产环境中数据库的默认配置无法满足高性能网站架构的需求,本章会从实际工作经验出发,总结 MySQL 数据库应该如何优化。

2301_76584825的博客 1593

高效管理Node.js版本与pnpm安装全攻略

本文提供了一套高效管理Node.js版本与pnpm安装的完整攻略。针对开发中常见的版本冲突和磁盘空间问题,详细介绍了如何在Windows和Ubuntu系统上安装并配置pnpm,并重点讲解了如何利用其内置的`pnpm env`命令进行Node.js版本管理,实现一站式环境管理,提升开发效率。

weixin_28840591的博客 317

MySQL故障排查与优化

(3)通常是使用 RAID-0+1 磁盘阵列,注意不要尝试使用RAID-5,MySQL 在 RAID-5 磁盘阵列上的效率并不高。解决方法:修改 my.cnf 配置文件,在[mysqld]下添加 innodb_force_recovery=4, 启动数据库后备份数据文件,然后去掉该参数,利用备份文件恢复数据。通过 phpMyAdmin 修复, phpMyAdmin 带有修复数据表的功能,进入到某一个表中后,点击“操作”,在下方的“表维护”中点击“修复表”即可。2)临时修改最大连接数,重启后不生效。

fantuan_sss的博客 1999

OC5021B 100V宽电压输入 LED车灯/大功率照明 DC降压型恒流驱动器

适用于LED大功率汽车大灯/大功率照明 OC5021B 100V宽电压输入 5A电流设计 DC-DC降压型恒流驱动IC

Handsome63841990的博客 2420

【WRF后处理】基于wrf-python处理wrf运行结果wrfout_d01

基于wrf-python处理wrf运行结果wrfout_d01

WW、forever的博客 5211

MySQL故障排查

所以通常认为磁盘 I/0 是制约 MySQL 性能的最大因素之一,通常是使用RAID-0+1 磁盘阵列,注意不要尝试使用 RAID-5,MySQL 在 RAID-5 磁盘阵列上的效率并不高。如果 MySQL 主机查询 DNS 很慢或是有很多客户端主机时会导致连接很慢,由于开发机器是不能够连接外网的,在进行MySQL连接时,DNS 解析是不可能完成的,从而也就明白了为什么连接那么慢了。修改 my.cnf 主配置文件,在[mysqld]下添加 skip-grant-tables=on,重启数据库。

2302_79408199的博客 1081

从数据库到数据仓库:数据仓库导论

本文为数据仓库导论,旨在介绍数据仓库的基本理念和应用场景,帮助读者理解数据仓库的重要性及其在企业中的实际应用。

探索大数据世界 - 深入解析数据存储、分布式计算与人工智能 2788

MySQL 优化及故障排查

一般来说,可以通过 showstatus 命令查看数据库运行峰值时间的状态值 Open_tables 和 Opened_tables,判断是否需要增加 table_cache 的值(其中 open_tables 是当前打开的表的数量,Opened_tables 则是已经打开的表的数量)。默认是 4KB,设置值大对大数据查询有好处,但如果查询都是小数据查询,就容易造成内存碎片和浪费,查询缓存碎片率=Qcache_free_blocks/Qcache_total_blocks*100%。

fhjtg的博客 1388

面向业务角色的 SAP Fiori Space 与 Page 创建全流程实战指南

业务角色导航设计:从Space与Page规划到实施 摘要:本文探讨了SAP S/4HANA Cloud和BTP ABAP环境中基于业务角色的导航设计方法。传统Fiori Launchpad的Group+Tile模式存在应用堆积问题,而新的Space与Page模型将导航按工作领域(如应付会计、销售代表)组织,每个Space包含多个任务导向的Page。文章详细介绍了从业务角色建模到Space/Page创建、分配的完整流程,包括核心概念解析、规划思路和具体操作步骤。重点阐述了如何根据业务需求选择创建方式(基于预交

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 187

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

最全CentOS环境下MySQL数据库故障排查指南手册

本文旨在帮助运维和DBA工程师在CentOS操作系统下,对MySQL数据库进行系统化、全面的故障排查。文章涵盖MySQL核心架构原理、常见故障类型、日志分析、性能监控、参数优化、脚本实用示例等,以确保在生产环境中能够快速定位和解决问题。

轻口味的专栏 1498

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

数据库故障排查指南:从连接问题和性能优化

数据库故障排查需要结合日志分析、工具使用和实际场景经验。本文通过具体案例和代码示例,系统性地介绍了从连接问题到性能优化的解决方案。主动监控:使用工具实时监控数据库状态。定期维护:制定备份和索引优化计划。安全加固:限制用户权限,防止SQL注入。

2401_82505179的博客 2010

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

mysql故障排查

MySQL是目前企业最常见的数据库之一日常维护管理的过程中,会遇到很多故障汇总了常见的故障,MySQL默认配置无法满足高性能要求。

MCB134的博客 1309

MySQL故障排查和性能优化

由于本实验用的mysql8.0版本请注意看自己版本。

悟已往之不谏 900

​​​​​​​MySQL数据库故障排查指南

SHOW SLAVE STATUS\G -- 关注Slave_IO_Running和Slave_SQL_Running。innodb_force_recovery = 1 -- 从1到6逐步尝试(6为最高修复级别)-- 定义慢查询阈值(秒)-- 仅对MyISAM表有效。-- 查看事务和锁信息。-- 找到阻塞的进程ID。-- 检查表是否损坏。

技术日常 1196
上一篇: 热烈祝贺网深科技被认定为国家“高新技术企业”
下一篇: 疫情下,我们助力某港口通行卡系统故障定位
NetInside_
博客等级 码龄5年 69粉丝 151原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值