监控Mysql所在机器的CPU和磁盘IO

背景：

Mysql服务器不时的会有too many thread running 的告警。有时候thread running 飙高时，各种查询和更新都慢，单条记录的commit都能超过5秒。
就想看看是为什么导致的，我们用的是lepus监控框架，能够监控到mysql内部的一些指标项。
但有时候需要了解mysq所在机器的信息，比如thread running飙高时的主机CPU和主机IO繁忙情况，以及此时此刻Mysql的CPU占用和IO繁忙情况。
这样对问题的发生就有比较全面的认识。

思路

因为我们用的是lepus监控框架，对mysql的指标监控是通过定时调用check_mysql.py来实现对mysql监控，check_mysql.py内部是这样实现的：

        ############################# CHECK MYSQL ####################################################
        mysql_variables = func.get_mysql_variables(cur)
        mysql_status = func.get_mysql_status(cur)       
        time.sleep(1)
        mysql_status_2 = func.get_mysql_status(cur)
        ......

func.get_mysql_status(cur) 其实就是调用show global status;

def get_mysql_status(cursor):
data=cursor.execute(‘show global status;’);
data_list=cursor.fetchall()
data_dict={}
for item in data_list:
data_dict[item[0]] = item[1]
return data_dict

通过两次show global status，获得1秒间隔内的各项指标差值，将这些差值记录下来，作为持续健康的记录，用于后续图形化的展示。
基于这个思路扩展，能否在定期获取mysql的各项指标时，同时获取主机的CPU和IO繁忙率，Mysql进程的CPU和IO繁忙率，以及主机所有进程的磁盘读写量和Mysql进程的磁盘读写量。和mysql的指标差值一起记录下来。后续在图表展示时，也能对照分析。达到类似这样的效果：

通过上面的图对比看，就知道数据库的thread running 飙高的根本原因是磁盘io能力不足。