线上OOM问题排查

最新推荐文章于 2025-04-03 02:29:32 发布
原创 最新推荐文章于 2025-04-03 02:29:32 发布 · 349 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#java #oom #jvm

本文记录了一次线上服务遇到的CPU占用过高导致OOM的问题。作者通过JProfiler分析dump文件，迅速定位到问题类，并提供了分析方法，包括查看方法堆栈和关注BiggestObjects，为解决性能瓶颈提供了有效途径。

今天上线了一个优化，上完线后测试验证没有问题，本来以为这个事情就告一段落，没有想到四五个小时以后运维就@我说服务的CPU占用过高，不一会就OOM了，赶紧让运维把堆栈dump文件给我，我用的是JProfiler来分析dump文件。

Classess
比较幸运的是我很容易就找到了自己熟悉的一个类

右键

选择References

References
点击最后的show more，可以看到对应的方法堆栈，就可以知道是那块方法的问题
堆栈信息

或者从Biggest Objects入手也可以
Biggest Objects

线上服务OOM问题排查
zelinhehe的专栏
10-29 1744
背景简介 风控服务有两个node，通过 SLB（负载均衡）对外提供服务。 其中 node2 比 node1 多了一个 scheduled task：定时统计数据，由于很多数据库只有在运行时才知道，所以有个动态连接数据库模块 问题描述 node2 服务异常，日志报错： java.lang.OutOfMemoryError: Java heap space （对外风控服务正常，因为node1服务正常，负载均衡服务会自动剔除异常节点） 排查过程 由于 JVM的启动参数没有显示指定...
线上OOM问题排查总结
水瓶座鬼才的博客
06-24 1850
也就是说当发生OutOfMemoryError错误时，才能触发-XX:HeapDumpOnOutOfMemoryError 输出到-XX:HeapDumpPath指定位置。2.配合参数：-XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=/export/home/tomcat/logs/…这个方法导致了OOM，这个方法写的是个死循环。导出路径是/Users/zhaoyijie/IdeaProjects/java-study/Jdk-api-demo/logs/
OOM问题快速线上定位原因和排查
豪代码的博客
03-22 2760
OOM快速线上定位欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mark
排查线上环境 OOM 问题
houxian1103的博客
05-27 623
概述 有时Java服务端上线后，运行一段时间后就会出现OOM 问题，这样问题是非常严重的。 那要怎样排查？怎样解决？ 工具安装： 为什么会要安装工具？这是因为我们现在按照的open jdk 是默认没有安装jmap,jstatck，需要自行安装。 以 Centos7 为例 介绍安装过程 先使用 java -version 版本 号 OpenJDK Runtime Environment (build 1.8.0_322-b06) 查询 Jmap 与java 当前版本匹配的版本 yum whatpro
线上OOM,怎么排查?
最新发布
weixin_39777492的博客
04-03 1127
当JVM因为没有足够的内存来为对象分配空间，并且垃圾回收器也已经没有空间可回收时，就会抛出这个错误。和不带的输出，若某类实例数差异大，说明其对象生命周期短，可能存在临时对象过多的问题。JVM因内存不足无法为对象分配空间，且垃圾回收器无法回收内存时抛出的错误。）若占用内存过高，可能未释放流、缓存或集合对象。：查看JVM内存分配及使用情况，判断是否内存分配不合理。直接内存（NIO使用的堆外内存）耗尽，常见于未释放的。：列出内存中对象实例数量及占用内存排序，定位异常对象。（Eden与Survivor区比例）。
Probe：Android线上OOM问题定位组件
2401_84544363的博客
05-01 1032
为了解决HAHA算法中检测不到基础类型泄漏的问题，我们在遍历堆中的Instance时，如果发现是ArrayInstance，且是byte类型时，将它自身舍弃掉，并将它的RetainSize加在它的父Instance上，然后用父Instance进行后面的排序。我们在生成Reference之后，做了一步链路归并（如上图），即对于同一个对象的不同Instance，如果其底下的引用链路中的对象类型也相同，则进行归并，并记录Instance的个数和每个Instance的RetainSize。
一次线上oom问题排查记录及spring mvc官方bug提交
weixin_42448366的博客
10-19 1531
本文记录一次线上oom问题的定位过程以及如何解决问题的思路。 很多java的线上问题都可以用类似思路去定位问题以及解决问题，不管是我们自己写的业务bug导致的 或者是框架层的bug. 希望本文可以在排查java问题给到大家一些思路上的帮助。 问题现象 某次周五快要下班的时候，udb登录服务突然有大波告警，赶紧登上机器排查原因，回家吃晚饭的时间又要推迟咯。 一会就有用户反馈上来说 登录不上。二话不...
线上OOM排除
qw2869534823的博客
03-22 1060
表示 JVM 内存不足以分配对象空间。是 Eclipse 基金会开发的 Java 内存分析工具，支持可视化分析堆转储文件。通过 MAT 找到可疑对象后，需在代码中定位具体逻辑。：获取 JVM 内存中对象分配的完整快照。查看对象分布，但功能较弱，​。
一次线上OOM故障排查经过
weixin_33933118的博客
03-05 260
2019独角兽企业重金招聘Python工程师标准>>> ...
线上JVM OOM问题，如何排查和解决？
weixin_66137383的博客
03-02 2569
JVM OOM 是一个复杂但常见的问题，它可能出现在堆内存、永久代/元空间、栈内存或直接内存等区域。排查 OOM 的关键在于启用诊断选项（如堆转储和 GC 日志）、分析错误日志和堆转储文件、检查垃圾回收日志。解决 OOM 的方法包括增加内存、优化代码、调优垃圾回收器参数和管理外部资源。持续监控和预警机制可以有效预防 OOM 问题的发生。希望这篇文章能帮助你在面试中更好地回答 OOM 相关问题，也能在实际工作中解决类似问题。如果你在工作中也遇到过 OOM 问题，欢迎在评论区留言，我们一起交流经验。
线上OOM排查
空明的博客
06-28 1060
jps查看服务器中当前用户下的Java进程查看Java虚拟机在当前时刻的线程快照。线程快照是当前java虚拟机内每一条线程正在执行的方法堆栈的集合，生成线程快照的主要目的是定位线程出现长时间停顿的原因，如线程间死锁、死循环、请求外部资源导致的长时间等待等。线程出现停顿的时候通过jstack来查看各个线程的调用堆栈，就可以知道没有响应的线程到底在后台做什么事情，或者等待什么资源。Java虚拟机统计信息工具，利用JVM内建的指令对Java应用程序的资源和性能进行实时的命令行的监控。
OOM问题排查
wssjdysf1的专栏
05-11 705
一次OOM排查过程 https://blog.youkuaiyun.com/john8169/article/details/55802651
线上系统OOM如何排查
任我行哟的博客
12-09 2790
线上系统OOM排查 1、使用top命令看一下线上的CPU、内存是否正常。 2、定位异常进程，看日志。 3、如果是OOM，用jstat -gc pid 1000 100(每秒)监控JVM内存运行状况和gc频率。 4、jmap -dump:live,format=b,file=dump3.hprof pid ，使用jmap dump内存快照。 5、使用MAT工具进行分析。 ...
如何排查过线上 oom 的问题
m0_52514893的博客
10-25 600
1. java.lang.OutOfMemoryError: Java heap space ------>java 堆内存溢出，此种情况最常见，一般由于内存泄露或者堆的大小设置不当引起。对于内存泄露，需要通过内存监控软件查找程序中的泄露代码，而堆大小可以通过虚拟机参数 -Xms,-Xmx 来修改。：申请使用完的内存没有释放，导致虚拟机不能再次使用该内存，此时这段内存就泄露了，因为申请者不用了，而又不能被虚拟机分配给别人用。如果是普通的内存溢出，确实有很多占用内存的对象，那就只需要提升堆内存空间即可。
如何排查线上OOM
轻松的小希
04-11 1718
目录操作步骤：其他知识： 操作步骤： 登录线上服务器容器 换目录进行以下操作（不要在 / 操作） cd ~ 安装WGET下载工具（下载mat用的） yum install -y wget 安装UNZIP解压工具（解压mat用的） yum install -y unzip 安装MAT分析工具（需要jdk8的支持，容器环境默认自带） wget https://mirrors.neusoft.edu.cn/eclipse/mat/1.10.0/rcp/MemoryAnalyzer-1.10.0.20200
线上CPU100%及应用OOM的排查和解决过程
阿飞云漫步
06-04 1360
点击上方☝，轻松关注！及时获取有趣有料的技术文章“最近工作又遇到几次线上告警的问题，排查基本上就是cup100%以及内存OOM问题，再分享一下之前遇到这类问题排查的一些思路和过程，希望对你...
Java排查线上oom问题
03-04
### Java 线上 OOM OutOfMemoryError 解决方案 #### 一、理解 OOM 错误类型 Java 应用程序中的 `OutOfMemoryError` 主要分为几种常见类型： - **Java 堆内存不足（Java Heap Space OOM）** 这种类型的错误表明 JVM 的堆空间不足以完成垃圾回收操作，通常是因为对象过多或单个对象过大。当应用程序创建大量临时对象而未能及时释放时，可能会触发此类错误[^1]。 - **GC Overhead Limit Exceeded** 此错误表示垃圾收集器花费了太多时间尝试清理少量可用内存，导致应用性能严重下降甚至停止响应。Oracle 官方指出该情况通常是由于频繁的小规模垃圾回收造成系统资源耗尽所致[^2]。 #### 二、诊断工具与技术 为了有效定位和解决问题，在线环境下的调试至关重要。可以采用如下手段来捕获必要的信息用于后续分析： - 使用 `-XX:+HeapDumpOnOutOfMemoryError` 参数配置JVM启动参数，使得发生OOM时自动生成heap dump文件供离线分析。 - 利用 VisualVM 或 JProfiler 进行实时监控，观察内存变化趋势以及各代存活对象数量；还可以通过这些工具获取线程转储(Thread Dump)，帮助识别是否存在死锁等问题影响正常工作流程。 - 查看日志记录，特别是那些由第三方库生成的日志条目，它们可能隐藏着关于异常行为的重要线索。 ```bash jmap -histo:live <pid> | head -n 50 # 显示当前进程中前五十大类实例占用的总字节数量 ``` 上述命令可以帮助快速了解哪些类正在消耗较多的内存资源。 #### 三、具体措施建议 针对不同种类的 OOM 错误采取相应的预防性和修复性行动： 对于 **Java Heap Space OOM**: - 分析 heap dump 文件找出泄露源码位置； - 减少不必要的缓存数据保留期限； - 提高数据库查询效率减少一次性加载的数据集大小； - 合理调整最大堆尺寸(`-Xmx`) 和初始堆尺寸 (`-Xms`) 设置以适应实际负载需求。 面对 **GC Overhead Limit Exceeded** : - 修改 GC算法选项如选用G1收集器替代CMS; - 扩展年轻代比例使更多短生命周期的对象能够在此处被迅速清除而不进入老年代引发全局扫描; - 如果业务逻辑允许的话适当放宽gc开销阈值(-XX:GCTimeRatio=99); - 对于某些特殊场景考虑引入软/弱引用机制代替强引用来管理可选组件间的依赖关系从而降低整体压力. ```xml <property name="spring.datasource.hikari.maximumPoolSize" value="${MAX_POOL_SIZE}" /> <!-- 配置连接池的最大活跃数 --> ``` 合理设置数据库连接池参数也是缓解内存紧张的有效途径之一。 ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值