双12压测引出的线上Full GC排查

最新推荐文章于 2025-03-28 16:46:08 发布
原创 最新推荐文章于 2025-03-28 16:46:08 发布 · 472 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#jvm #java #算法

本文讲述了在双12压测期间遇到的线上Full GC问题，涉及元空间(Metaspace)知识、问题排查、故障定位及修复。问题由FastJson的ASM Serializer使用不当引起，通过调整Metaspace大小、分析GC日志和代码优化成功解决。建议关注类加载器、Metaspace设置和动态代理技术可能导致的内存问题。

这个Full GC问题是去年双12压测的时候触发的，中间排查的过程和踩的坑给大家借鉴一下。

线上问题

双12之前压测的时候起了很小的量，直接触发了Full GC，吓尿了，因为马上双12大促预热就要开始了，这搞不好妥妥的3.25啦。
在这里插入图片描述
赶紧拉群，把相关同学拉在一起排查问题。
在这里插入图片描述
可以看到原因是超过了Metadata GC的阈值，触发了Full GC，Metaspace从243M 回收到231M，基本没怎么回收掉，所以稍微再来点量，很容易再次触发Metaspace 的回收。

知识储备

GC问题排查需要很多储备知识，最主要是JVM相关的，之前文章已经讲过一些了，这里主要讲Matespace是什么？后面讲怎么做的GC问题的排查。
在这里插入图片描述
这里有二个知识点：

  • Matespace（元空间）是什么？在JVM中扮演什么角色，也就是存放什么的？
  • Full GC跟Matespace 大小设置有什么关系？

Matespace叫做元空间，从JDK 8开始，永久代(PermGen)的概念被废弃掉了，取而代之的是一个称为Metaspace的存储空间。

Metaspace用来存放：Class文件在JVM 里的运行时数据结构；以及存Klass相关的其他的内容，比如

最低0.47元/天 解锁文章
Java小小虫
关注
线上问题——频繁 Full GC 问题的排查思路
longool的博客
12-21 1861
启用 GC 日志分析 GC 日志内容选择合适的垃圾回收器调整垃圾回收器参数实时监控内存使用情况分析监控数据
线上 FullGC 问题排查实践 —— 手把手教你排查线上问题
crg18438610577的博客
05-08 1576
线上 FullGC 问题排查实践 —— 手把手教你排查线上问题
组内应用频繁FullGC问题排查过程记录
Liar_27的博客
10-23 1164
JVM FullGC问题排查过程记录
jmap常用命令
随风飘雁
10-11 4466
jmap查看java服务内存占用
频繁Full GC如何排查
Gemini1995的博客
03-13 2609
频繁的Full GC可能会影响应用程序的性能和稳定性，因此需要进行排查和解决。通过以上方法可以逐步排查和解决频繁Full GC的问题，提高应用程序的性能和稳定性。
JVM调优视角下的代码设计：解析GC机制对永航科技笔试题的5层影响
——服务运行几天后突然卡顿，监控显示Full GC频繁触发，但排查代码却找不到明显泄漏点？又或者，明明逻辑简单的方法，在压测时却引发大量Minor GC，拖慢整体吞吐？ 这些问题的根源，常常不是JVM参数配置不当，而是...
GC频繁触发怎么办？JVM调优前必须掌握的6大GC日志解读核心技巧
[系统异常处理与故障排查](https://learn.microsoft.com/en-us/azure/cosmos-db/nosql/media/benchmarking-framework/typical-write-latency.png) # 1. GC频繁触发的典型现象与调优前的认知准备 在高并发、大内存...
垃圾回收算法演进全记录：6代GC技术变革如何实现性能飞跃（含ZGC压轴登场）
排查后发现，罪魁祸首竟不是数据库瓶颈，也不是网络抖动，而是JVM的一次**Full GC**。 这正是垃圾回收（Garbage Collection, GC）带给我们的经典痛点：程序运行得好好的，突然来一次“Stop-The-World”，整个世界...
基于JFR的GC行为深度追踪：发现隐藏停顿根源的3种高级分析法
或者更诡异的是——日志里没有任何Full GC记录，应用却频繁出现数百毫秒的卡顿？ 这些问题的答案，往往就藏在 **Java Flight Recorder**（JFR）那一个个不起眼的二进制事件中。 作为JVM内置的低开销运行时诊断工具...
频繁 Full GC 问题排查方法
m0_57836225的博客
09-26 913
平时同学们可以总结一套自己解决频繁 Full GC 问题的方法步骤，以便在面试时对答如流，给面试官留下好印象。希望本文总结的通用步骤能为大家提供参考。
经典线上问题—JVM Full GC 的排查思路
最新发布
zhangqin111的博客
03-28 1751
Java 虚拟机在执行程序的过程中，会把所管理的内存划分成若干不同的。这些区域各有各有的用途，有的区域会随着虚拟机进程的启动而一直存在；有的区域会伴随着用户线程的启用和结束而创建和销毁。其次，JVM 内存区域也称为等其中，运行时数据区的。
一次线上JVM调优实践，FullGC40次/天到10天一次的优化过程
hellozhxy的博客
05-17 287
就在我还在调查入口流量的问题时，另外一个同事找到了根本的原因，原来是在某个条件下，会查询表中所有未处理的指定数据，但是由于查询的时候where条件中少加了模块这个条件，导致查询出的数量达40多万条，而且通过log查看当时的请求和数据，可以判断这个逻辑确实是已经执行了的，dump出的内存中只有4W多个对象，这个是因为dump时候刚好查询出了这么多个，剩下的还在传输中导致的。经过了第一次的调优后发现内存泄漏的问题，于是大家都开始将进行内存泄漏的调查，首先排查代码，不过这种效率是蛮低的，基本没发现问题。
深入探究 JVM 频繁 Full GC 的排查过程
fudaihb的博客
02-23 3303
在当今软件开发领域，Java语言以其跨平台性、面向对象、高性能等特点成为了广泛应用的首选之一。而Java应用程序的核心执行环境就是Java虚拟机（JVM），它负责将Java字节码翻译成机器码并执行，是Java程序运行的基础。在JVM的内存管理机制中，垃圾回收（GC）是一个至关重要的部分，负责释放不再被引用的对象占用的内存空间，以确保应用程序的稳定性和性能。
如何分析JVM的full gc问题
weixin_39304656的博客
06-02 3132
分析Full GC问题是优化Java应用性能的重要环节。Full GC（Full Garbage Collection）是指对整个堆内存（包括新生代和老年代）进行垃圾回收，通常伴随着较长的停顿时间。
JVM频繁Full GC问题的排查与解决方案
她们都叫我靓仔
11-20 3062
（JProfiler是一款堆内存分析工具，可以直接连接线上jvm实时查看相关信息，也可以分析dump出来的堆内存快照，对某一时刻的堆内存情况进行分析）将我们dump出来的文件解压，修改后缀名。Heap Dump是JVM堆内存的快照，通过分析Heap Dump，开发者可以了解当前内存中有哪些对象占用了大量空间，从而定位哪些对象导致了内存泄漏或过度的老年代占用。老年代中的内存碎片可能导致对象无法晋升，即使老年代有足够的空闲空间，也无法容纳新的大对象，从而触发Full GC。
groovy脚本导致FullGC问题排查
elricboa的专栏
12-09 1082
背景：  应用中内嵌了groovy引擎，会动态执行传入的表达式并返回执行结果  线上问题： 发现机器的fullGC从某个时候开始暴涨，并且一直持续；登到机器上，用jstat -gcutil 命令观察，发现perm区一直是100%，fullGC无法回收；将这台机器的内存dump出来进行分析；在类视图中，发现大量的groovy.lang.GroovyClassLoader$InnerLoad
FullGC
u014644574的博客
02-09 1万+
FullGC
Java Full GC (Ergonomics) 的排查
热门推荐
谈谈1974
04-05 1万+
文章目录1. Full GC (Ergonomics)1.1 Java 进程一直进行 Full GC1.2 Full GC 的原因1.3 检查堆占用2. 代码检查3. 解决方式 1. Full GC (Ergonomics) 1.1 Java 进程一直进行 Full GC 例行检查线上运行的 Java 服务，通过 jstat -gcutil < pid > 命令检查 gc 情况的时候发......
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值