02 多线程GC overhead limit exceeded

最新推荐文章于 2024-08-09 17:04:25 发布

原创最新推荐文章于 2024-08-09 17:04:25 发布 · 907 阅读

0 ·

CC 4.0 BY-SA版权

JVM 专栏收录该内容

1 篇文章

订阅专栏

这篇博客探讨了在处理大量数据时遇到的`GC Overhead Limit Exceeded`异常。博主分析了异常产生的原因，指出该异常是由于GC时间过长且回收效果不佳导致的。通过分析代码，发现使用5个线程读取Excel中的数据可能是问题所在。解决方案包括优化代码、调整JVM参数以及增加堆内存。同时，博主对Java默认JVM参数配置提出疑问，并展示了如何查看当前的JVM内存设置。

一问题

近期使用 OPI用户模式去读取excel,excel有10万条数据,运行jar包,异常如下:

Exception in thread "pool-2-thread-3" java.lang.OutOfMemoryError: GC overhead limit exceeded
        at org.apache.xmlbeans.impl.store.Cur$CurLoadContext.attr(Cur.java:3044)

二异常分析

2.1 异常信息分析

GC overhead limit exceeded,是发生在GC占用大量时间为释放很小空间的时候发生的，是一种保护机制。一般是因为堆太小，导致异常的原因：没有足够的内存。
Sun 官方对此的定义：超过98%的时间用来做GC并且回收了不到2%的堆内存时会抛出此异常。

2.2 代码问题分析

运行java jar包,开启5个线程读取excel5个sheet去处理业务,每个sheet平均2万条信息; 使用 POI用户模式去读取的信息.

解决点: 去了解一下OPI用户模式耗内存的问题.

三解决办法

解决办法：

1，查看项目中是否有大量的死循环或有使用大内存的代码，优化代码。
2，JVM的一个参数：-XX:-UseGCOverheadLimit 禁用这个检查，其实这个参数解决不了内存问题，只是把错误的信息延后，替换成 java.lang.OutOfMemoryError: Java heap space。
3，增大堆内存 set JAVA_OPTS=-server -Xms512m -Xmx1024m -XX:MaxNewSize=1024m -XX:MaxPermSize=1024m

四疑惑

问题:

1.java -jar 默认jvm参数配置?
网上说,-Xmx 默认内存为物理内存的1/4,下面证实一下:

运行jar,打印java运行时的扩展参数,如下:

 -XX:InitialHeapSize=130023424 
 -XX:MaxHeapSize=2069889024 
 -XX:MaxNewSize=689963008 
 -XX:MinHeapDeltaBytes=524288 
 -XX:NewSize=42991616 
 -XX:OldSize=87031808 
 -XX:+UseCompressedClassPointers 
 -XX:+UseCompressedOops 
 -XX:+UseFastUnorderedTimeStamps 
 -XX:+UseParallelGC

最大内存为2048M ,本机内存为8G!