推荐一个分布式JVM监控工具,非常实用!

springboot+poi导出百万级数据避免OOM内存溢出 记录下在实际项目中碰到过一个重大问题,全量导出百万级数据,由于之前在开发环境数据没有达到百万级别,因此此问题没有处理,上到测试环境后,数据量达到150万的时候,全量导出所有的数据出现内存溢出问题。这段代码亲测有效,到测试环境上导出五百多万条数据都没有出现OOM问题,希望对各位朋友有效。这里实现了多个sheet页导出的数据,excel导出一个sheet最多能导出100万多一点数据,至于具体数字,请朋友们自行百度下。 阅读详情

点击上方“芋道源码”,选择“设为星标”

管她前浪,还是后浪?

能浪的浪,才是好浪!

每天 10:33 更新文章,每天掉亿点点头发...

源码精品专栏

 

来源:blog.youkuaiyun.com/xk4848123/
article/details/106952309


介绍

该项目为了方便开发者更快监控多个远程主机jvm,如果你的项目是Spring boot那么很方便集成,jar包引入即可,不是Spring boot也不用气馁,你可以快速自行初始化一个Spirng boot程序引入jar包即可

“

推荐下自己做的 Spring Boot 的实战项目:

https://github.com/YunaiV/ruoyi-vue-pro

效果展示

124c12d319b0c8ac1ebd5f30e7a7e845.png
“

推荐下自己做的 Spring Cloud 的实战项目:

https://github.com/YunaiV/onemall

整体架构

61d790cdbfec02c82d336a8dec00d416.png

git地址

  • https://github.com/xk4848123/monitor

  • https://github.com/xk4848123/monitor-server

使用前提

需要机器中有JDK,不仅仅是JRE,配置好java path,程序中依靠ExcuteCmd找寻jdk基本命令

手把手教你用

克隆monitor-server
git clone https://github.com/xk4848123/monitor-server.git
a360c47ede1f2a406d520d09cafc02eb.png

idea -> Project from Existing Sources…

8ff18ae391f4a9d6d9bb3c2d4617bd7d.png

选中项目pom.xml

df4617aaa581f4f9ae233bf6cefc668d.png

修改resources/application.properties

6d0e6733c12e54c7d601dd7b0794b911.png
monitor.serve[0].name=serve-1
monitor.serve[0].address=http://127.0.0.1:8081/monitor(这里需要与客户端的monitor.path对应)
monitor.serve[1].name=serve-2
monitor.serve[1].address=http://127.0.0.1:8082(同上)
....

这里可以配置多个监控主机,格式注意下

  • address=http://ip:port/xxx(xxx是你在monitor上配置的,下文中会有)

  • name=server-1(每个monitor不同即可,便于显示时区分)

run monitor-server

f8197e846d9e8d0676d74b748b0ec3da.png

有异常没关系,我们把监控客户端也部起来就好了

说在前面

一个操作系统内部署一个监控客户端就好,当你有个多个jvm程序时,只要有一个部署就可以监控

下载Release

“

https://github.com/xk4848123/monitor

55b7bfb0cb8930dcd9003253b28d14b6.png

进入Release列表,下载jar

9a052e6332b4a2f1b66ea8427689a0c7.png

本地mvn install(等到博主把jar传到中心仓库就不用这么么麻烦了)

cmd执行以下命令

mvn install:install-file -DgroupId=com.github.xk4848123 -DartifactId=monitor-spring-boot-starter -Dversion=2.3.1 -Dpackaging=jar -Dfile=C:\Users\Administrator\Downloads\monitor-spring-boot-starter.jar
da9f7f35f1d0877e05c72eb88246565b.png

在任意一个Spring boot项目中使用,我这里打开我本地一个叫chat的项目

985254758cbdfc83fe4d2774edcd334e.png

在resources/application.properties增加属性

#决定访问路径,可以自行定义
monitor.path=monitor
#决定是否启动监控客户端
monitor.enable=true
45bf06dded5191054e048960c4082cb2.png

pom.xml引入

6cdde5f3bfe8b67ca3f0be3818e00f75.png

跑起项目

937eb38cca2340e65ddbe27130e9c7ff.png

OK!

我们现在访问monitor-server(我当下部署的在http://127.0.0.1:8888,大家根据自己的配置访问)

4bef25cf2249ecaeb08df23534c4c467.png

欢迎加入我的知识星球,一起探讨架构,交流源码。加入方式,长按下方二维码噢:

cc6fd24f8156f6d5249a049e37ec0fe5.png

已在知识星球更新源码解析如下:

8b929d4752be3112834a13f836f6fa9e.png

6a84b79676e92a612b7f12b5a002867a.png

b875969400cb76847522adaa424bda28.png

05a35a09f7e7c5a0ca3ffb6894a70d6b.png

最近更新《芋道 SpringBoot 2.X 入门》系列,已经 101 余篇,覆盖了 MyBatis、Redis、MongoDB、ES、分库分表、读写分离、SpringMVC、Webflux、权限、WebSocket、Dubbo、RabbitMQ、RocketMQ、Kafka、性能测试等等内容。

提供近 3W 行代码的 SpringBoot 示例,以及超 4W 行代码的电商微服务项目。

获取方式:点“在看”,关注公众号并回复 666 领取,更多内容陆续奉上。

文章有帮助的话,在看,转发吧。
谢谢支持哟 (*^__^*)
解决POI读取Excel内存溢出的问题 Office软件一直是一个诲誉参半的软件,广大普通计算机用户用Office来满足日常办公需求,于是就产生了很多生产数据和文档,需要和企业单位的专用办公系统对接,而Office的解析工作一直是程序员非常头痛的问题,经常招致程序员的谩骂,也被誉为是微软最烂的发明之一。POI的诞生解决了Excel的解析难题(POI即“讨厌的电子表格”,确实很讨厌,我也很讨厌Excel),但如果用不好POI,也会导致程序 阅读详情

相关推荐

Java领域Spring Cloud的服务监控工具推荐

在Spring Cloud构建的分布式微服务架构中,服务实例数量动态变化、调用链路复杂交织,传统单体应用监控方案失效。如何实时采集微服务运行指标(CPU/内存/JVM/接口性能)如何可视化呈现分布式服务调用链路如何实现服务健康状态的集中管理如何建立异常问题的快速定位机制覆盖从基础指标采集到上层可视化展示的完整监控栈,包含7种主流工具的技术原理、集成方案和最佳实践。核心监控概念与技术架构指标监控体系(Micrometer+Prometheus+Grafana)

AI开发架构师 1008

图解电商支付架构设计,这才是真电商

点击上方“芋道源码”,选择“设为星标”管她前浪,还是后浪?能浪的浪,才是好浪!每天 8:55 更新文章,每天掉亿点点头发...源码精品专栏原创 | Java 2020 超神之路,很肝~中...

芋艿V 907

解决poi读取excel2007出现内存溢出问题代码参

解决poi读取excel2007出现内存溢出问题代码参

kafka-console-ui的简介及安装使用

kafka-console-ui 是一款轻量级的kafka可视化管理平台,安装、配置特别简单,一般来说只需要配置一个kafka集群地址启动即可。为了开发的省事,没有国际化支持,页面只支持中文展示。不是一个企业级的平台,目前看来只适合中、小型集群的管理。这个工具看起来是挺low的,但是对于刚接触kafka急需一个合适工具进行管理的同学来说,还是挺友好的,没有国际化支持,全是中文展示。支持broker相关配置的查看及修改。

初夏0811的博客 7421

从外包到转正:一个华为OD亲历者的真实工作体验与避坑指南

本文分享了一位华为OD员工从外包到转正的真实经历与实用建议。通过详细解析华为OD的日常工作、转正核心指标、机试备考技巧及职场突围策略,为读者提供了一份全面的避坑指南。特别针对机试E卷的高频考点和刷题方法,给出了具体的数据分析和实战经验。

weixin_33686714的博客 712

FastH3 + vLLM-Omni:MiniMax H3 视频生成本地部署与加速实战

随着多模态大模型在视频生成领域的普及,如何高效部署和加速推理成为工程实践的关键。vLLM作为高性能推理框架,通过PagedAttention和continuous batching显著优化了大模型吞吐;而FastH3则针对特定模型结构进行算子融合和CUDA优化。结合vLLM-Omni对多模态输入的支持,可以将MiniMax H3的视频生成耗时从分钟级压缩至秒级。本文以视频生成模型为例,详细拆解环境配置、推理优化与问题排查,为多模态模型本地部署提供参考。

ciya3282的博客 486

推荐一个分布式 JVM 监控工具,非常实用

点击关注公众号,回复“1024”获取2TB学习资源!介绍该项目为了方便开发者更快监控多个远程主机jvm,如果你的项目是Spring boot那么很方便集成,jar包引入即可,不是Sprin...

民工哥的博客 643

WSL子系统启动报错 Wsl/Service/CreateInstance/CreateVm/HCS_E_SERVICE_NOT_AVAILABLE

WSL子系统启动报错 :Wsl/Service/CreateInstance/CreateVm/HCS_E_SERVICE_NOT_AVAILABLE 于是分析原因,最终发现是Windows功能中的虚拟机平台功能不知道什么时候被取消了。

Linux I Tell U 6万+

一个分布式 JVM 监控工具,非常实用!

点击关注公众号,利用碎片时间学习介绍该项目为了方便开发者更快监控多个远程主机jvm,如果你的项目是Spring boot那么很方便集成,jar包引入即可,不是Spring boot也不用气...

Java笔记虾 365

Cadence公司的数字IC设计工具:综合工具(Genus)——(2)

介绍Cadence公司的数字IC设计工具Genus

qq_42922513的博客 1946

实战演练:用wvp-GB28181-pro + ZLMediaKit搭建一个可用的国标视频监控测试环境(附设备模拟器对接)

本文详细介绍了如何使用wvp-GB28181-pro和ZLMediaKit在Ubuntu系统上搭建GB28181视频监控测试环境。从环境准备、组件解析到核心服务部署与设备模拟器对接,提供完整的实战指南,帮助开发者快速构建可验证的监控系统。

weixin_42692935的博客 580

推荐!分布式JVM监控工具,非常实用!

作者:灬子非鱼丶来源:blog.youkuaiyun.com/xk4848123/article/details/106952309# 介绍该项目为了方便开发者更快监控多个远程主机jvm,如果你的项目...

大数据星球-浪尖 328

VMware Workstation Pro 16 安装 Ubuntu 20.04

VMware Workstation Pro 16 安装 ubuntu 20.04目录环境VMware Workstation下载Ubuntu 20.04下载安装过程 目录 环境 Windows 10 Workstation 16 Pro for Windows Ubuntu 20.04 LTS 64位 desktop版本 VMware Workstation下载 链接: https://www.vmware.com/products/workstation-pro/workstation-pro-eval

qq_45642410的博客 1万+

JVM性能调优工具推荐!

工具主要功能优点缺点JVisualVM内存监控、垃圾回收分析、线程分析、CPU 采样等免费、开源、易用,集成于 JDK 中大型应用性能分析不够深入,实时性较差YourKit深度的内存泄漏检测、CPU 性能分析、数据库分析等功能强大,支持实时监控和动态分析商业收费,功能复杂多维度监控、实时数据可视化、告警机制开源、灵活,适合微服务架构和容器化环境配置复杂,对 JVM 性能分析不如专门工具深入JProfilerCPU 性能分析、内存泄漏检测、线程分析、数据库性能分析等。

tangjieqing的博客 1086

【前端基础篇】HTML5 + CSS3 入门知识

,HTML5和CSS3核心知识

前端知识分享喵 2982

ABAP Open SQL 数据拷贝导致 SAPSQL_DATA_LOSS:从报错机理到稳妥修复

数据类型与长度不合规。一旦在Open SQL的无损赋值检查里被发现,系统宁可中止也不会偷偷替你截断。把变量声明对齐到字典、在需要时明确表达转换/截断意图、写法上避免落入高危的操作数位置,再配合ATC的预防性检查,既能解决你这次的ST22Dump,也能把同类问题消灭在萌芽状态。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 433

推荐一个分布式JVM监控工具,建议收藏!!!

点击上方[全栈开发者社区]→右上角[...]→[设为星标⭐点击领取全栈资料:全栈资料介绍该项目为了方便开发者更快监控多个远程主机jvm,如果你的项目是Spring boot那么很方便集成,...

全栈开发者社区 97

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

上一篇: “我的“职业规划
下一篇: 石墨文档 Websocket 百万长连接技术实践
公众号-芋道源码
博客等级 码龄10年 1637粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值