线上环境OOM频发,MyBatis有坑...

2026年Windows下Codex与Claude Code本地AI编码环境实操指南 Codex和Claude Code已从传统插件演变为基于OpenAI兼容API规范的智能代理协议客户端,其核心是本地化、安全可控的大模型调用能力。原理上依赖Ollama等开源服务构建标准化RESTful网关,实现模型托管、TLS终止与上下文流式处理;技术价值在于将代码补全、重构、审查等任务压缩至毫秒级响应,同时规避公网传输风险与GDPR合规隐患。典型应用场景包括Java微服务NPE定位、Python+SQL混合逻辑生成、Vue组件TypeScript类型推导等中高级开发任务。本文聚焦Windows原生环境( 阅读详情

图片

继上次线上 CPU 出现了报警,这次服务又开始整活了,风平浪静了没几天,看生产日志服务的运行的时候,频繁的出现 OutOfMemoryError,就是我们俗称的 OOM,这可还行!

 频繁的 OOM 直接会造成服务处于一个不可用的情况,最严重的一天,它重启了 5 次。我通过 Skywalking 查看链路调用,基本全报红了,基本处于一个瘫痪状态,因为生产该服务是分布式部署,k8s 故障恢复当即对该服务进行重启,因为是 B 端的产品,先让公司业务能用起来了,保证服务的正常使用,然后紧急查看问题。

当然这个问题很多同事不会排查,老板就让我亲自动手了。既然分配给我了,咱高低给它查出来,并且修复了。

BUG之路

先来了解下OutOfMemoryError出现的原因,无非就是两类堆内存空间不足、元空间不足。

  1. 堆内存空间不足:意味着程序存在一直有引用的对象(强引用),主要对象在引用的状态就无法被GC回收,撑爆了-Xmx堆拓展的最大值,内存不足自然就会触发堆内存溢出。

  2. 元空间:Java 8 引入了元空间概念,代替了之前堆的永久代,由于元空间属于堆外内存,不需要有对象引用,通过指针的方式表示类和元数据,之所以引用元空间就是一种 JDK 的升级优化,避免了永久代的内存溢出。详细内容参见https://t.zsxq.com/0fdOtNgEQ。

常见堆内存溢出的几种情况

  1. 查询数据库返回的数据量过大,加载到内存中导致内存溢出;

  2. 代码中出现死循环情况,导致大对象一直被引用不能被 GC 回收;

  3. 资源链接池、io 流在使用完没有进行手动释放;

  4. 静态集合类里面存在引用对象,始终存在引用关系,没有进行清除;

以上属于常见的几种堆内存溢出的场景,当然有时候我们的遇到的问题都是稀奇古怪的问题,常见的问题总是很少能遇到…

现象分析

根据生产环境的报错日志来看,这边属于 Mybatis 报出的一个内存溢出情况,通过去看 Mybatis 源码发现,底层也是通过一些集合类来存放拼接的 sql,那么当然也有可能出现堆内存溢出,而且在 sql 体积比较大的情况下,接收 sql 的集合就会变的非常大,如果回收不了那么就会导致内存溢出。

图片

内存

由于我们 docker 容器里面没有一些 jstack、jmap 的工具,并且 dump 文件也没有进行保存…导致我无法通过看线程高占用内存的对象,来分析具体是什么操作发生的内存溢出,这就难了… 于是只能去网上搜搜看了,没想到真的给到我一些启发,并且有点思路大概知道是哪里的问题。

老天真的赏饭吃,我搜到了一篇关于惨遭 DruidDataSource 和 Mybatis 暗算的 OOM 文章。看起来,和我的情况很像。

给我带来了新的启发,这是 Mybatis 带来的 OOM。主要是因为 Mybatis 拼接 SQL 的时候生成的占位符和参数对象,存放在 Map 里,当 SQL 的参数多导致 SQL 太长的时候,Map 持有这些 SQL 时间较长,并且多线程同时操作,这时候内存占用就很高,从而发生 OOM。

Mybatis源码分析

通过对DynamicContext类源码查看,DynamicContext 又一个 ContextMap 类型的参数bindings,继承了 HashMap 相当于一个Map集合,接着看这个类中的 getBindings 方法,看到了 ForEachSqlNode 这类调用了 getBindings 方法,简单的说就是 ForEachSqlNode 通过 getBindings 方法,将 SQL 参数和参数的占位符统一 put 到 ContextMap 这个集合里面,主要是这里面的参数和占位符无法被 GC 回收,并发查询量多的情况下就会导致 OOM。

图片

Mybatis源码分析

图片

Mybatis源码分析

图片

Mybatis源码分析

情景复现

随后我做了线上场景的复现,通过将 SQL 语句的拼接,将 IN 里面的参数变大,然后创建 50 个线程进行执行,将 JVM 堆内存设为-Xmx256m -XX:+PrintGCDetails -XX:+HeapDumpOnOutOfMemoryError

图片

OOM 复现

图片

OOM 复现

这里看控制台打印的日志,服务在频繁的进行 Full GC,导致 OOM。

图片

频繁的Full GC

总结

既然发现了问题出现的原因,接下来就是对代码 SQL 进行优化,尽量避免在 sql 拼接的时候体积过大。这里告诫我们代码不能乱写,SQL 语句也不能随意写啊,有时候把问题想的过于简单确实会带来不可预知的风险。

另外,docker 中也配置了 oom 留存 dump 文件。后面如果万一再出现故障,也不至于太被动。

作者:Lxlxxx

https://juejin.cn/post/7221461552343072828

AI编程工具选型避坑指南:Trac、Cursor、Claude Code、Copilot实战对比 AI编程工具已从概念验证进入工程落地深水区,其核心价值不在于模型参数规模,而在于能否深度嵌入真实开发工作流——包括跨模块上下文理解、工程规范边界识别与低认知中断的交互节奏。当前主流工具如GitHub Copilot、Cursor、Claude Code和Trac,分别代表云端轻量补全、本地向量增强、长上下文优先与纯离线安全四条技术路径。它们在Java微服务依赖解析、TypeScript泛型推导、Python数据脚本生成及嵌入式C开发等场景中表现迥异,选型本质是安全与时效、通用性与项目贴合度的权衡。本文基于千 阅读详情

相关推荐

三菱A800变频器矢量控制实战:从速度控制到位置控制的PLG参数设置全解析

本文深入解析了三菱A800变频器结合FR-A8AP选件板与PLG(脉冲编码器)实现高精度矢量控制的实战应用。详细阐述了从速度控制、转矩控制到位置控制三种高级模式的切换逻辑、核心参数设置及硬件接线要点,帮助工程师充分发挥A800变频器的闭环控制潜力,应对复杂工业自动化场景。

weixin_28308325的博客 327

记mybatis一级缓存引起的一次oom

记mybatis一级缓存引起的oom排查过程解决方案 最近做了一个同步数据的需求,需要将代理人学习课程的记录同步至ck,便于数据分析及对应报表查询导出等功能。线上大约十几万代理人,课程五十门左右,累计大约五百万的数据。于是写了个定时任务计算学习结果后插入到clickhouse中。 上代码: 代码很简单,刚做的时候考虑到数据量较大 没有一次性处理数据,而是分课程去循环处理代理人学习课程的数据,每次根据课程id查出的代理人课程数据也就十几w条,然后再切割数组,每次批量插入一千条,插入完成后,再将此课程数据置

大碍桃花开 2634

2026零成本私有化:OpenClaw一键搭建Discord/Telegram智能机器人,数据不出本地,永久免费替代ChatGPT

如果内置的功能不能满足你的需求,你可以很容易地添加自己的自定义工具。public string Description => "查询指定城市的天气";// 调用天气API获取天气信息return $"city今天的天气是晴,温度25度";// 注册工具今天北京的天气怎么样?大模型的选择很重要:不要盲目追求大参数的模型。对于大多数场景来说,7B参数的模型已经足够用了,而且速度快,内存占用低。上下文长度不要设置太大:上下文长度越大,内存占用越高,推理速度越慢。

2601_94871597的博客 261

MyBatis中使用流式查询避免数据量过大导致OOM

今天mybatis查询数据库中大量的数据,程序抛出: java.lang.OutOfMemoryError: Java heap space 看下日志,是因为一次查询数据量过大导致JVM内存溢出了,虽然可以配置JVM大小,但是指标不治本,还是需要优化代码。网上查看大家都是流式查询,这里记录下解决的过程。 1、Mapper.xml配置 select语句需要增加fetchSize属性,底层是...

bobozai86的博客 5258

Veeam Backup 13 通过UI界面高效备份VMware ESXi虚拟机的完整指南

本文提供了一份使用Veeam Backup 13图形化界面高效备份VMware ESXi虚拟机的完整指南。内容涵盖从环境准备、添加vCenter/ESXi主机、配置备份存储库,到创建备份任务、设置保留策略与计划,以及执行备份和验证成功的关键步骤。通过直观的UI操作,管理员可以轻松实现虚拟机数据的可靠保护与快速恢复。

weixin_29322553的博客 441

【纯血鸿蒙】安装hdc工具

参考资料:

oh.K 5563

mysql mybatis oom_MyBatis中使用流式查询避免数据量过大导致OOM

一、前言 前面介绍了裸露JDBC 方式使用流式编程,下面介绍下MYbatis中如何使用二、Mybaits中MyBatisCursorItemReader的使用2.1 配置MyBatisCursorItemReader的注入其中queryId为mapper文件中接口名称。Mapper.xml设置 其中fetchSize="-2147483648",Integer.MIN_VALUE=-2147483...

weixin_39875842的博客 679

SOEM主站开发篇(1):移植SOEM主站到Linux开发板

详细介绍了SOEM主站源码移植到Linux开发板上的步骤,同时演示了如何使用Linux开发板获取EtherCAT从站的PDO映射信息。

kevin1499的博客 2399

mybatis一级缓存(session cache)引发的问题

mybatis一级缓存(session cache)引发的问题

flysharkym的专栏 7万+

手把手教你学simulink实例--基于Simulink的船舶发电柴油机建模与健康状态研究

船舶发电柴油机是现代船舶电力系统的核心设备,为船舶提供稳定的电能供应。然而,由于长期运行在复杂的海洋环境中,船舶发电柴油机容易受到磨损、腐蚀和疲劳等损伤的影响,导致其性能下降甚至发生故障。因此,对船舶发电柴油机进行建模和健康状态监测具有重要意义。本项目旨在使用MATLAB/Simulink平台,建立船舶发电柴油机的动力学模型,并通过仿真分析其健康状态,预测潜在故障,从而提高船舶运行的安全性和经济性。

MHD0815的博客 1327

fasterlio原理及代码框架梳理

Faster-LIO 的优势是在保持同等高精度的前提下,显著提升计算效率,以支持更极端的应用场景(如高速无人机)和更廉价的硬件平台。可以把 Faster-LIO 理解为用一把更快的“空间哈希筛子”(iVox)替换了原来精细的“动态平衡树”(ikd-Tree),从而在精度损失极小的情况下,实现了效率的显著提升。:只在实际有地图点的空间区域动态创建和保留体素单元,形成一个稀疏的体素地图。是关键:将去畸变点云中的每个点,在 iVox 维护的局部地图中搜索近邻(如5个最近点),构建点到面的距离残差。

Studying…… 246

缓存惹的祸?探讨MyBatis二级缓存的四个不推荐之处

然而,由于开启了 MyBatis 的二级缓存且会话B还未失效,会话B仍然从二级缓存中获取到的是旧的用户信息,导致最终输出结果可能是旧的姓名,而不是预期的"Alice"。当使用 MyBatis 的二级缓存时,会将查询的结果对象缓存在内存中,以便在后续的查询中直接使用,从而减少数据库访问次数,提高性能。这其中涉及到整个查询结果集的存储,包括用户对象及其关联对象等,如果数据量较大,二级缓存可能导致内存的过度占用,从而影响系统的性能和稳定性。因此,在复杂查询的情况下,不建议使用 MyBatis 的二级缓存。

青轩桃李能几何,流光欺人忽蹉跎 2787

Android实现自动输入文本效果 (附完整源码)

Android实现自动输入文本效果 (附完整源码)

希望我的博客,能帮上你解决学习中工作中所遇到的问题 417

线上 OOM 频发,MyBatis 有坑...

既然发现了问题出现的原因,接下来就是对代码 SQL 进行优化,尽量避免在 sql 拼接的时候体积过大。这里告诫我们代码不能乱写,SQL 语句也不能随意写啊,有时候把问题想的过于简单确实会带来不可预知的风险。另外,docker 中也配置了 oom 留存 dump 文件。后面如果万一再出现故障,也不至于太被动。

2301_78526383的博客 309

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

生产环境又OOM了,这次是Mybatis的锅?

点击上方“Java基基”,选择“设为星标”做积极的人,而不是积极废人!每天14:00更新文章,每天掉亿点点头发...源码精品专栏原创 | Java 2021超神之路,很肝~中文详细注释的开源项目RPC 框架 Dubbo 源码解析网络应用框架 Netty 源码解析消息中间件 RocketMQ 源码解析数据库中间件 Sharding-JDBC 和 MyCAT 源码解析作业调度中间件 Elast...

weixin_44421461的博客 172

最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版

Part-E1-SDIO-Specification-Ver4.00-Final-120220.pdf:最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版,包括SDIO 接口的外设,SDIO 接口官方协议等。

同事写了一条 SQL,把 MyBatis 都干翻了。。

继上次线上CPU出现了报警,这次服务又开始整活了,风平浪静了没几天,看生产日志服务的运行的时候,频繁的出现OutOfMemoryError,就是我们俗称的OOM,这可还行!频繁的OOM直接会造成服务处于一个不可用的情况,通过Skywalking查看链路调用,基本全报红了,基本处于一个瘫痪状态,因为生产该服务是分布式部署,运维当即立断对该服务进行重启,因为是B端的产品,先让公司业务能用起来了,保证服务的正常使用,然后紧急查看问题,当然这个问题就来到了我这里,既然分配给我了,咱高低给它查出来,并且修复了。

fuladulu的博客 598

Java 技术问题及解决方案

12.13.

qq_34828100的博客 496

Metaspace内存泄漏频发?你可能忽略了这3个Class卸载必要条件

解决Metaspace内存泄漏难题,关键在于掌握Metaspace的Class卸载条件。本文详解三大必要条件:类加载器被回收、无活跃实例引用、类数据无外部引用,适用于JVM调优与线上故障排查。理解这些机制可显著提升应用稳定性,避免频繁Full GC,值得收藏。

CompiShoal的博客 675

什么?!26 双非 Java 实习距离赚够100w还差98.5w......

初始方案使用POI直接全量查询导出,结果导致生产环境Full GC频发,服务不可用长达15分钟。接到业务部门需求:需要导出近3个月的所有订单数据(约200W条)用于财务对账。测试环境必须模拟真实数据量(用100W条测试数据把测试环境打挂3次才暴露问题)JVM堆内存从2G直接飙升到4G(超过最大限制)对于超大数据量导出,改为异步任务+OSS文件下载。导出请求平均耗时8分钟(最终超时失败)永远不要相信"只是导个数据而已"的需求。// 使用MyBatis流式查询。增加导出权限控制(仅限财务部门)

aka14bsz的博客 406

Apache Fesod替代EasyExcel的实战指南:解决Excel大文件OOM与精度问题

Excel解析是Java后端高频技术场景,涉及数据导入导出、财务对账、报表生成等核心业务。其底层依赖Open XML规范,传统DOM式解析(如EasyExcel)易引发JVM内存溢出(OOM)、跨平台数值精度丢失、反射开销大等问题。Apache Fesod采用SAX流式解析+编译期Schema+原生公式引擎,实现内存占用从O(n²)降至O(1),支持百万行级稳定处理与Mac/Windows/WPS全平台一致计算。适用于高并发批量导入、复杂表头识别、动态数组公式解析及金融级精度要求场景,是企业级Excel数据

weixin_34082789的博客 363

Spring Boot物流管理系统:数字化解决方案与关键技术实践

物流管理系统是数字化转型中的核心基础设施,通过B/S架构实现业务流程自动化。其技术原理基于Spring Boot框架,整合MyBatis-Plus、Redis等组件,采用分层架构确保系统扩展性。在物流行业,这类系统能显著提升订单处理效率(如电子运单降低人工错误率)和仓储管理精度(RFID技术实现动态盘点)。典型应用场景包括智能路径规划(遗传算法优化运输路线)和实时库存同步(乐观锁控制并发)。本文以YH物流系统为例,详解如何通过读写分离、Docker部署等技术方案解决中小物流企业面临的效率瓶颈与资源浪费问题。

weixin_34160277的博客 348

SSM框架开发医院招聘考试管理系统的实践与优化

在数字化转型背景下,企业级应用开发常采用SSM(Spring+SpringMVC+MyBatis)框架组合,该技术栈通过控制反转(IoC)和面向切面编程(AOP)实现模块解耦,结合MyBatis的SQL优化能力提升系统性能。这类架构特别适合处理高并发业务场景,如医院招聘考试管理系统需要应对考生报名、智能排考等复杂需求。通过Redis缓存和数据库连接池优化(如HikariCP配置),系统QPS可从50提升到1200,有效解决高峰期崩溃问题。实际部署中,还需结合WebRTC实现防作弊监控,并利用遗传算法优化考场

weixin_34198762的博客 377

SpringBoot+Vue会议室预定系统开发实战

会议室管理系统是现代企业办公自动化的核心组件,基于时间冲突检测算法和实时状态同步机制实现高效资源调度。采用SpringBoot+Vue的前后端分离架构,结合RESTful API和WebSocket技术,解决了传统管理方式效率低下的痛点。技术实现上,SpringBoot提供稳定的微服务支持,Vue.js构建响应式界面,MyBatis-Plus和Redis优化数据访问性能。典型应用场景包括企业会议室预定、教学资源调度等需要实时协同的领域,该系统通过多级缓存策略可实现3000+ QPS的高并发访问。

weixin_31969181的博客 243

SpringBoot会议室管理系统开发与优化实践

会议室管理系统是现代企业办公场景中的核心工具,通过信息化手段解决传统纸质预约带来的资源冲突与管理低效问题。其技术实现通常采用SpringBoot框架,该框架凭借自动配置、内嵌服务器等特性大幅提升开发效率,特别适合高校毕业设计等有时间限制的项目。系统核心功能包括预约冲突检测、审批工作流和资源统计报表,涉及数据库事务、缓存优化等关键技术点。在工程实践中,SpringBoot与MyBatis、Thymeleaf等组件的整合,以及性能调优方案的实施,为开发者提供了典型的企业级应用开发范例。这类系统可广泛应用于高校、

weixin_31986143的博客 131

SpringBoot会议室预订系统开发实践与架构解析

会议室预订系统是企业办公自动化的核心组件,基于时间窗口算法实现资源冲突检测是其关键技术原理。这类系统通过SpringBoot+MyBatis Plus技术栈可快速构建高可用服务,其中Redis缓存和响应式设计能显著提升用户体验。在混合办公趋势下,智能推荐和移动适配成为行业热词,本系统采用三级校验策略确保预约准确性,并通过Docker实现高效部署。典型应用场景包括跨部门协作、远程会议调度等,系统设计尤其注重实时状态更新与数据分析看板的工程实践价值。

weixin_33502772的博客 234
上一篇: Chrome 115 有哪些值得关注的新特性?
下一篇: 字节面试:HTTPS 是如何保证传输安全的?
IT界那些事儿
博客等级 码龄6年 2万+粉丝 22原创
评论 2
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值