线上系统查看java进程是如何被杀掉的

最新推荐文章于 2025-06-14 12:46:43 发布

赶路人儿

最新推荐文章于 2025-06-14 12:46:43 发布

阅读量8.4k

点赞数

CC 4.0 BY-SA版权

分类专栏： linux 文章标签： linux

本文链接：https://blog.youkuaiyun.com/liuxiao723846/article/details/78086000

linux 专栏收录该内容

293 篇文章

订阅专栏

本文记录了一次线上Java业务系统因Linux系统内存不足而被自动终止的经历。通过查看Linux系统日志，确定了是由于内存资源耗尽触发了内核的OOM killer机制，最终导致Java进程被强制结束。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

线上服务器部署了一个java业务系统，今天突然发现进程不在了，查看java系统错误日志、gc日志都没有发现任何问题。奇怪之下，只能查看linux的系统日志——message，在这里面找到了导致java进程被杀的真凶。

进入/var/log目录，看到了有如下的message日志：

-rw-------  1 root  root      11174 Sep 25 22:05 messages
-rw-------  1 root  root      47851 Sep  3 02:46 messages-20170903
-rw-------  1 root  root      59019 Sep 10 03:04 messages-20170910
-rw-------  1 root  root      45481 Sep 17 03:14 messages-20170917
-rw-------  1 root  root      75629 Sep 24 03:20 messages-20170924

查看其中一天的日志（java进程杀掉的时间）：

# cat messages-20170924 | grep ttbrain
Sep 21 14:29:39 ttAlgorithm-tomcat-online073-jylt kernel: ttbrain-recomme invoked oom-killer: gfp_mask=0x280da, order=0, oom_adj=0, oom_score_adj=0
Sep 21 14:29:39 ttAlgorithm-tomcat-online073-jylt kernel: ttbrain-recomme cpuset=/ mems_allowed=0
Sep 21 14:29:39 ttAlgorithm-tomcat-online073-jylt kernel: Pid: 15018, comm: ttbrain-recomme Tainted: G        W  ---------------    2.6.32-504.12.2.02.abc.el6.x86_64 #1
Sep 21 14:29:39 ttAlgorithm-tomcat-online073-jylt kernel: [14958]     0 14958 15254513 12668994   0       0             0 ttbrain-recomme
Sep 21 14:29:39 ttAlgorithm-tomcat-online073-jylt kernel: Out of memory: Kill process 14958 (ttbrain-recomme) score 956 or sacrifice child
Sep 21 14:29:39 ttAlgorithm-tomcat-online073-jylt kernel: Killed process 14958, UID 0, (ttbrain-recomme) total-vm:61018052kB, anon-rss:50675972kB, file-rss:4kB

可以看到，是由于linux系统内存不足，从而把java进程杀掉了。