触发OOM杀掉了mysql

本文记录了一次紧急处理MySQL故障的过程,包括登录问题排查、数据库重启、表修复等步骤,强调了监控与通信的重要性。
中午收到反馈平台所有账号全部无法登录,运维就是苦逼,饭都没吃就跑来处理紧急故障,先自己测试了下确实无法登录进系统,登录服务器检查,发现mysql数据库挂掉了,定位到了原因就赶紧重启mysql吧,结果启动失败,
一直报端口地址被占用,ps aux netstat查看都没有mysql进程,使用lsof -i :3306终于看到了还存在一个连接,kill掉pid,然后再启动成功
处理好后一看手机微信里早有告警,哎,犯了个运维大错,手机应该时刻保持在手可以收到通信,在处理问题时应该先看下自己的告警信息,痛定思痛
本以为到这里没事了,后面运营说数据量不对,先是配合开发查找了半天,后面定位到应该是那个表无法定入的问题,查看数据库error.log,果然有报错
2017-05-04 14:38:10 42012 [ERROR] Got error 127 when reading table './apixxxxxx'

  CHECK TABLE xxxx;    检查表
  REPAIR TABLE xxxx;   修复表

  再次检测下,ok,修复完毕

  写这篇博客就是需要反思记录下,遇到问题千万不能紧张慌乱,日常一定要做好监控,并保持通信,首先查看监控可以确保第一时间找到问题,免得了东找西看浪费宝贵的恢复时间

 

转载于:https://www.cnblogs.com/shansongxian/p/6807629.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值