OOM排查简述

原创 已于 2024-03-05 10:29:28 修改 · 350 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#java

于 2022-04-22 14:57:10 首次发布
当遭遇因内存溢出导致的系统宕机时，可以通过检查系统日志寻找包含'GCOverheadLimit'的SQL作为问题线索。使用MAT（MemoryAnalyzerTool）工具分析内存dump文件，可以揭示占用大量内存的对象和可能的源头SQL。MAT工具会提供详细的分析报告，比如局部变量持有大量内存，结合日志和请求参数，能更准确地定位问题。找到问题SQL后，可以与开发团队进行沟通解决，但要注意沟通方式以免影响团队关系。

因为内存溢出造成系统宕机是一个头疼的问题，那么怎么确定问题源呢

直接翻找相关系统日志，搜索 GC overhead limit，一般内存溢出报错上面的SQL就是问题的源头SQL

如果硬要找说服力，可以下载相关内存溢出生成的dump文件用MAT（MemoryAnalyzerTool）工具分析(这个工具应该属于老掉牙的东西，凑合用)

我们可以看到MAT工具自动分析后会给你列出问题嫌疑的内容：局部变量保有量达到753M，好大一对象，JVM消化不动撂挑子了。

查看详细内容会发现一些似曾相识的内容，eg：sendtime在前面的异常日志里出现过，多翻几个node会发现完全与日志里的SQL匹配，此时你就可以拿着这个SQL甩到开发人脸上BB一番，嗯这样做容易没朋友慎用。

补充：RequestParam目录下可以看到请求参数，更容易确认问题来源

JAVA：内存溢出（OOM）问题的排查指南
木头
06-18 1117
摘要： Java 内存溢出（OOM）是常见问题，可能因对象无法回收、线程过多、大对象申请等引发。排查时可通过工具链分析： 基础命令：ps/jps定位进程，top监控内存，jstat观察GC情况。 深入分析：jmap导出堆快照或统计对象分布，jstack追踪线程问题，jcmd排查Metaspace泄漏。 解决方案：优化代码（减少强引用、调整缓存）、调整JVM参数（堆大小、GC策略），限制线程或DirectBuffer内存。 综合使用工具定位根源并针对性优化，可有效提升应用稳定性。
Docker和JVM应用OOM那些事
u010554324的博客
07-03 3532
Java 应用运行过程中你是否遇到以下类似问题为什么 Java 应用所在的 Docker 容器内存使用量不会减少？发生 OOM 后程序还能运行吗？Java 应用所在的容器为什么宕机或者自动重启了？三个问题有一定关联性，在回答以上问题前，我们先了解下“OOM”和“JVM 内存管理”。
线上问题排查：当项目中出现OOM问题时，应该如何排查？
Liu_y_xin的博客
09-04 2366
当项目中出现OOM问题时的排查方法
又一次线上OOM排查经过
weixin_34267123的博客
05-16 409
2019独角兽企业重金招聘Python工程师标准>>> ...
发生OOM了，你知道是什么原因吗，又该怎么解决呢？
笑看风云路的博客
07-03 4843
撸java代码的同学，多多少少都会碰到内存溢出（OOM）的场景，但是造成OOM原因却不止一个。今天就来总结一下常见的OOM的原因以及解决方案。
OOM内存溢出排除方法
weixin_49999835的博客
08-29 430
tomcat退出前或者发生OutOfMemeoryError时自动dump堆栈信息，方便事后排查问题。jmap -dump:live,format=b,file=/保存路径/文件名.hprof PID。在tomcat启动参数中加入两个参数。linux用ps命令查看进程pid。然后重启tomcat服务。
mat分析线上heap dump文件
mapeng765441650的博客
12-30 1736
mat分析线上heap dump文件 1. 发现问题 (1) 某次线上服务3台机器全部宕机，查看日志及监控发现，oom异常 (2) 赶紧登录服务器，做了一次线上heap dump 操作，保留快照文件，以便后续分析问题 ① 进入docker容器，docker exec -it xxxx sh ② 执行jps，查看服务进程 jps, ③ 开始做dump文件： jmap -dump:format=b,file=heap.2021-12-28.hprof <pid> ④ 至此，线上快照完毕，
JVM内存问题排查
偶尔写些东西，意思一下我也参与了内卷
01-25 1619
JVM 的堆空间分成2个区域：年轻代、老年代年轻代又进一步细分成3个区域：Eden、Survivor From、Survivor To。
doris insert into偶发性oom
最新发布
08-21
首先，用户的问题是关于Doris中INSERT INTO操作偶发性内存溢出（OOM）的问题排查与解决方法。系统指令要求我使用中文回答，结构清晰，逐步解决问题，并保证回答真实可靠。 回顾引用内容： - 引用[1]：Doris之Insert...
线上常见问题案例及排查工具
猪猪
12-07 1614
1、找到最耗CPU的进程（top -c），找到最耗CPU的线程（top -Hp 进程ID）,jstack查看最耗CPU的堆栈信息（jstack 10765 | grep '0x2a34' -C5 --color）2.、阿⾥开源的全能的故障诊断⼯具Arthasdashboard命令查看TOP N线程，thread命令查看堆栈信息。内部集成的⽕焰图⼯具OOM/1. JDK⾃带的VisualVM：使⽤jmap命令⽣成堆转储快照也就是dump⽂件，然后通过VisualVM。
JVM学习-实践，记录OOM分析(十二)
加油，努力，认真
05-02 344
目录1. 说明2. 排查 1. 说明 线上出现异常，但是查看节点状态正常，因为使用了容器,挂掉了会重启。因为jvm配置了-XX：HeapDumpOnOutOfMemoryError 参数，出现OMM就会将当时线程和jvm内存情况转存起来可参考:《JVM参数配置》 2. 排查 1.将运维发过来的hprof导入到 vm 可参考《JVM监控》 2.我们去当时的线程日志查看 3.搜索13219这个线程id找到线程查看堆栈信息 4.分析堆栈找到业务代码 分析问题原因 具体看标红处 发现是导入功能问题 导致oo
什么是oom,常见造成oom的原因，及解决方法
热门推荐
baidu_32015283的博客
02-25 2万+
一：什么是oom oom就是我们常说的内存溢出，它是指需要的内存空间大于系统分配的内存空间，oom后果就是项目程序crash; 二：常见造成oom的原因 1.内存泄露造成 2.加载的文件或者图片过大造成 三：解决方案 内存泄露是造成内存溢出的一个原因，所以避免内存泄露的那些方法都适用于内存溢出 比如及时回收无用的引用对想，资源回收等… 对于图片方面，如果加载过大的图片要将图片转出bitmap要压缩...
Java内存泄漏OMM
weixin_44137260的博客
08-01 1653
JVM 发生 OOM 的 8 种原因、及解决办法 高手总结的9种 OOM 常见原因及解决方案 堆溢出 这种场景最为常见，报错信息： java.lang.OutOfMemoryError: Java heap space 原因 1.代码中可能存在大对象分配（如大数组） 2.可能存在内存泄漏，多次GC后，仍然无法找到一块足够大的内存容纳当前对象 解决方法 1.对于大对象分配，条件允许的话，可以扩大堆内存的分配空间，是否可以对大对象进行分割 2.对于内存泄漏，可以使用（jmap和jconsole监测），检查代码
OOM排查和处理
致力于不留技术债务cuizb.top
01-20 2506
1、OOM异常：java.lang.OutOfMemoryError: Java heap space Xms10m代表堆初始化大小为10m； Xmx10m代表堆最大为10M； XX:+PrintGCDetails代表打印日志 Xms等于-XX:InitialHeapSize；-Xmx 等同于-XX:MaxHeapSize；而-Xss等同于-XX:ThreadStackSize； 如果不配垃圾回收器，系统默认使用parallel scavenger和parallel old作为老年代垃圾回收器， 堆
JVM-内存溢出排查
sinat_26781639的博客
03-21 908
背景：线上环境项目出现OMM，系统只能重启使用 日志： java.lang.OutOfMemoryError: Java heap space at java.util.Arrays.copyOf(Arrays.java:3236) at java.io.ByteArrayOutputStream.grow(ByteArrayOutputStream.java:11...
OOM问题排查及原因解析
藏经阁
11-07 9999
一、前言 最近公司线上出了故障，有业务反馈说线上某台机器发出的请求status都是101，代表是超时。于是顺着调用栈和监控去查，最后发现这台机器上的网关挂掉了，所以导致请求发不出去，导致业务超时。那为啥无缘无故的网关挂掉了呢，顺着各种系统日志去查，结合机器是mq消费脚本专用机器，最后从系统日志/var/log/messages中查到如下日志 ... Out of memory: Kill p...
Java OOM问题如何排查
一蓑烟雨任平生
06-26 3382
目录 OOM 问题 什么是OOM 导致OOM问题的原因 排查手段 实战 MAT分析 OOM 问题 什么是OOM OOM为out of memory的简称，来源于java.lang.OutOfMemoryError，指程序需要的内存空间大于系统分配的内存空间，OOM后果就是程序crash；可以通俗理解：程序申请内存过大，虚拟机无法满足，然后自杀了。 导致OOM问题的原因 为什么会没有内存了呢？原因不外乎有两点： 1）分配的少了：比如虚拟机本身可使用的内存（一般通过启动时
oom java问题_Java OOM问题如何排查
weixin_39622123的博客
02-16 418
@OOM 问题什么是OOMOOM为out of memory的简称，来源于java.lang.OutOfMemoryError，指程序需要的内存空间大于系统分配的内存空间，OOM后果就是程序crash；可以通俗理解：程序申请内存过大，虚拟机无法满足，然后自杀了。导致OOM问题的原因为什么会没有内存了呢？原因不外乎有两点：1)分配的少了：比如虚拟机本身可使用的内存(一般通过启动时的VM参数指定)太少...
OOM 如何排查
u014230945的博客
12-07 1570
1、启动的时候加上 -XX:+HeapDumpOnOutOfMemoryError 以上为本地idea配置启动参数 设置堆最大128m，并且设置如果发生oom的化，打印自动打印进程快照 通过上述配置然后执行如下代码后的控制台结果 public static void main(String[] args) throws InterruptedException { Map<Integer, byte[]> map = new HashMap<>()..
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值