Linux运维篇|服务器重启

问题现象

线上环境某个时间出现了系统无法登录的情况，导致了业务服务异常，无法正常登录。

问题排查

通过业务的监控promethus和面板grafana观察node的监控，发现监控中的16:25-16:40之间的数据是中断的。也就是prometehus的pod有问题了收集不到数据。

通过uptime以及last reboot命令查看到19小时之前服务器有重启过，正好对应了grafana监控中有问题的数据的时间段。发现服务器确实存在重启现象。

排查/var/log/message日志，重启时间段没有明显异常。

/var/log/crash 通常是用于存储系统崩溃转储或内核崩溃相关日志的目录。在 Linux 系统中，如果内核崩溃（也称为“内核 panic”），系统可能会生成一个内核转储文件并将其保存在这个目录中。通过分析这些崩溃日志和转储文件，可以帮助诊断和修复导致系统崩溃的问题。

分析//var/log/crash 日志

使用crash工具分析vmcore日志

crash /usr/lib/debug/lib/modules/5.1