记一次线上机器OOM的排查过程

Mr、追风少年

已于 2022-07-23 12:50:21 修改

阅读量298

点赞数

文章标签： java 数据库 sql

于 2022-07-23 12:49:02 首次发布

本文链接：https://blog.youkuaiyun.com/m0_54117624/article/details/125943431

版权

文章目录

一、报错示例
二、dump文件分析
3. JProfiler工具下载
- - - 3.1 选择打开一个快照:
    - 3.2 选择最大对象,可以看出来我们OOM的原因主要是因为list这个最大的对象

一、报错示例

首先是收到了,测试人员反馈的我们的灰度环境多个接口调用超时的情况,登录线上的机器查看错误如下:

2022-07-22 22:04:08.731 ERROR 22110 --- [http-nio-9099-exec-14] o.a.c.c.C.[.[.[/bs].[dispatcherServlet]  : Servlet.service() for servlet [dispatcherServlet] in context with path [/bs] threw exception [Request processing failed; nested exception is org.springframework.jdbc.UncategorizedSQLException: 
### Error updating database.  Cause: java.sql.SQLException: Error
### The error may involve com.mintrust.bs.dao.mappers.FailRecordInfoMapper.insert-Inline
### The error occurred while setting parameters
### SQL: INSERT INTO t_fail_record_info  ( id,req_uri,agent,version,serial_no,fail_code,fail_reason,fail_type,customer_id,mobile,certificate_no,real_name,order_no,create_time,req_param ) VALUES( ?,?,?,?,?,?,?,?,?,?,?,?,?,?,? )
### Cause: java.sql.SQLException: Error
; uncategorized SQLException for SQL []; SQL state [null]; error code [0]; Error; nested exception is java.sql.SQLException: Error] with root cause

java.lang.OutOfMemoryError: Java heap space

很明显这是一个堆溢出的异常,查看了我们的启动参数,发现并没有添加在OOM生成dump文件的参数,添加启动参数 -XX:+HeapDumpOnOutOfMemoryError
-XX:HeapDumpPath=/Users/candy/dumptest(dump文件保存的路径) 重新启动服务器

二、dump文件分析

以下是我我在本地机器用自己的环境测试了一下分析dump文件的步骤:

2.1 java代码

   public static void main(String[] args) {
        List<String> list = new ArrayList<>();
       while (true){
           list.add(UUID.randomUUID().toString());
       }
    }