点一下详情系统挂了,CPU 100%

如何处理CPU 100%的问题 CPU 100% 的问题可能由多种原因引起,包括进程异常、代码性能问题、资源不足等。通过使用系统监控工具进行诊断,找到高CPU使用的进程,并进一步分析其原因,采取相应的措施进行解决。通过定期监控、合理资源分配、负载测试和自动扩展等预防措施,可以有效减少CPU 100%问题的发生,确保系统的稳定性和高效运行。 阅读详情

👉 这是一个或许对你有用的社群

🐱 一对一交流/面试小册/简历优化/求职解惑,欢迎加入「芋道快速开发平台」知识星球。下面是星球提供的部分资料: 

9bc5d7e4184cbbdca37d19091cee50cc.gif

👉这是一个或许对你有用的开源项目

国产 Star 破 10w+ 的开源项目,前端包括管理后台 + 微信小程序,后端支持单体和微服务架构。

功能涵盖 RBAC 权限、SaaS 多租户、数据权限、商城、支付、工作流、大屏报表、微信公众号等等功能:

  • Boot 地址:https://gitee.com/zhijiantianya/ruoyi-vue-pro

  • Cloud 地址:https://gitee.com/zhijiantianya/yudao-cloud

  • 视频教程:https://doc.iocoder.cn

来源:juejin.cn/post/
7233307834456129593


又是一个百无聊赖的早晨,我在快乐地摸鱼,工作群响了:离线系统登录不上了。我第一反应是不科学啊,系统已经很久改动过了...赶紧上生产环境看看,CPU高达1200%。接着又是熟练地敲出那几行排查CPU过高的命令

top -H -p  pid查看java占用率最高的几条线程
jstack pid >  xxx.txt   打印线程快照
jmap -heap pid   查看堆内存情况
8fa776821ffb43e551c8acbfb85403b9.jpeg
top命令
5365ca0f261c1526e7325532ff1e9649.jpeg
jstack命令
b90019da482d7c933eddfc3adba5e0c8.jpeg
jmap命令

看这玩意啥都看不出来,感觉是系统对象没有释放,在疯狂GC,但是因为FULL GC的时候已经STW了,所以无法查看到底是哪个线程出了问题。然后过了10分钟系统突然又好了....堵塞的操作已经完成,gc能正常回收了。

然后过了两分钟又卡死了,我先重启了系统,后面再分析分析。

等系统没什么人用的时候,我再试着重现一下问题,打开系统一顿乱点,结果是点开某个功能的详情时系统卡住了,CPU又飚上去了,喜闻乐见~问题定位到了,再实锤一下之前是不是这个问题,我看了一下localhost_access_log日志发现,确实是这个接口卡了一千多秒。

9f0e5abf2baf400b620ab658f0ea9a28.jpeg
nginx日志

因为离线没什么人使用,所以问题过了很久再暴露出来。看了一下代码,主要是同事业务逻辑问题,有个参数没传进去,导致 sql 走了全表扫描,数据很多,要查很久,查到了几百万的数据,gc 也无法回收。

还好内存够大,要不然早就 OOM 了。

复盘

一开始我以为是某个接口调了很多次并发太高导致的,没想到点一下详情系统就挂了。。我们可以看到CPU在GC回收的时候STW,是没有线程能占用到CPU的,所以top -H -p pid 只能看到CPU全被GC线程占用了。如果是某个接口并发太高导致的,我们可以看jstack线程快照,里面是会有这个接口在执行的记录。

还有一个问题就是说系统GC卡了10-20分钟,却没有报OOM,还是一直在堵塞状态,后面还正常了一小会,这个是需要看堆内存的情况...

因为比较难排查所以只是通过现象知道GC还是可以回收一点点垃圾的

基于 Spring Boot + MyBatis Plus + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://github.com/YunaiV/ruoyi-vue-pro

  • 视频教程:https://doc.iocoder.cn/video/

总结

1、CPU100%的时候可以打印线程快照jstack pid,查看是哪个线程占用了CPU,一般都是某个业务线程阻塞无法进行GC回收导致。

2、可以查看localhost_access_log查看系统接口用时,一般用时很久的都是有问题的接口。

3、同事的业务代码参数没有传,导致全表扫描直接卡死系统。


欢迎加入我的知识星球,全面提升技术能力。

👉 加入方式,“长按”或“扫描”下方二维码噢:

052d320422108c8e72e316ee390b86ef.png

星球的内容包括:项目实战、面试招聘、源码解析、学习路线。

7bfef22a0fc6dcd458221da5503af633.png

bf23db4db32f77dfd6174bbe0eac767d.png7f77eb840a2be0e45ccf316df54e6319.png91a005954edbe242b3940938cb484503.png346cb03d8fd88b2c871f0645c2d6cb04.png

文章有帮助的话,在看,转发吧。
谢谢支持哟 (*^__^*)
线上CPU100%问题总结及解决方案 我们在生产实践中或多或少遇见过CPU100%的问题,如果没有处理过这些问题,第一次遇见多少有点手忙脚乱不知道该怎么处理,而且这个问题也是面试过程中老生常谈的问题,掌握和解决这类问题对我们提升有很大的帮助,接下来我们就来聊一下有哪些问题会导致CPU100%,以及该如何处理解决这类问题。 阅读详情

相关推荐

使用 DeepSeek 配合 即梦AI 生成视频的详细教程

访问即梦AI官网,选择“AI作图”功能,将DeepSeek生成的提示词逐条粘贴至输入框,选择适配的模型(如“通用XL Pro”)和参数(如画幅比例、风格强度)1113。“我要制作一个关于普洱茶文化的宣传视频,请设计一个30秒的脚本,包含时间轴、画面描述、文案和分镜提示词,以表格形式输出。:云南古茶树群,清晨薄雾,金色晨光,露珠特写,国风山水画质感,16:9画幅,使用Nikon D850参数模拟513。:结合DeepSeek生成的知识点脚本与即梦AI的插画风格,制作科普动画211。

weixin_48995695的博客 3万+

点一下详情系统挂了,CPU100%

往期热门文章: 1、我说用count(*)统计行数,面试官让我回去等消息... 2、世界第三大浏览器正在消亡 3、被问懵了:MySQL 自增主键一定是连续的吗? 4、FastJson 很好,但不适合我! 5、告警:线上慎用 BigDecimal ,坑的差点被开了来源:juejin.cn/post/7233307834456129593又是一个百无聊赖的早晨,我在快乐地摸鱼,工作群响了:离线系统...

Java后端技术 638

初识Classic AUTOSAR开发工具链

在过去,软件和硬件之间具有很强的耦合性,阻碍了软件组件在不同硬件平台上的可移植性和重用性。而AUTOSAR作为汽车电子行业的标准,提供标准的软件接口定义,工程师可以根据需求将软件组件分配到汽车的ECU中,实现标准软件组件的可重用性。

怿星科技的博客 8098

CPU 100%问题排查总结

如果是Full GC次数过多,那么通过 jstack得到的线程信息会是类似于VM Thread之类的线程,而如果是代码中有比较耗时的计算,那么我们得到的就是一个线程的具体堆栈信息[如下]。如果程序中有大量的线程,并且这些线程没有得到适当的管理和控制,可能会导致线程竞争和频繁的上下文切换,从而导致CPU占用率高。如果程序中有大量的计算任务,尤其是在循环中进行复杂的计算操作,可能会导致CPU占用率高。如果程序中存在不合理的资源使用,例如频繁的IO操作或内存泄漏,可能会导致CPU占用率高。

程序猿进阶 1万+

Synopsys PCIe IP Loopback功能深度解析与应用实践

本文深入解析了Synopsys PCIe IP的Loopback功能,包括本地数字环回和远程环回两种模式的应用实践。通过详细的寄存器配置步骤和实战案例,帮助开发者快速掌握PCIe芯片验证与调试技术,提升系统开发效率。特别适合PCIe协议相关的硬件工程师和验证工程师参考。

weixin_29198045的博客 532

使用Bigemap下载地图流程

Bigemap地图下载简单流程,临时安排任务简单学习没有深入了解。

TKY666的博客 4854

CPU 100% 出现系统中断 怎么解决

【方法B】自动系统扫描:右键点击任务栏上的Windows图标,选择【Microsoft Powershell(管理员)】逐一输入以下指令:Dism /Online /Cleanup-Image /CheckHealth,按回车Dism /Online /Cleanup-Image /ScanHealth,按回车Dism /Online /Cleanup-Image /RestoreHealth,按回车sfc /scannow,按回车3. 重启电脑。

小 tom的博客 9087

Rsoft仿真实战:长周期光纤光栅参数优化与模式耦合分析

本文详细介绍了使用Rsoft软件进行长周期光纤光栅(LPFG)参数优化与模式耦合分析的实战方法。通过Rsoft仿真,可以高效优化光栅周期、包层厚度等关键参数,深入分析纤芯模与包层模的耦合特性,为光纤通信和传感应用提供可靠的设计依据。

h0i1j2k3l的博客 1115

快速定位线上CPU100%原因

引言 最近项目部门反应有个系统特别卡顿,很多页面都打不开了,开发人员告诉我说最近没有进行代码升级,我登录到对应的服务器上执行了top命令,发现cpu飙升到100%,对于这种问题我们应该快速的定位到问题,否则会影响线上系统的正常作业。 对于造成这种问题的可能原因,迅速的在头脑中闪过四种情况: 1、某个接口响应时间超长,并且可能被频繁调用 2、产生了过大的对象,造成频繁FGC 3...

Jack 架构师之路 4万+

在虚拟机中对阿克曼转向车进行导航及避障的仿真测试

一、    在我使用rosdep install teb_local_planner去安装teb_local_planner的时候,报错:Command ‘rosdep’ not found, but can be installed with:sudo apt install python3-rosdep2    我花大半个月好不容易建立起的一系列ROS环境,被python3-rosdep2这条万恶的语句连同ROS一起给我删了。。。悲伤来的那么猝不及防    随着ROS版本的迭代,相关资料很多都不再适用

慕羽★的博客 3810

华为昇腾(Ascend)开发考试原题目解析 (2024) (题库一)——HCIP-AI-Ascend Developer——第一部分

给出一段代码如下,以下哪个选项描述错误?...A.中的语句由 MindSpore 接管,有语法限制B. 算子在中定义,并用来建立网络C.__init__()中的语句由 Python 解析执行D. 网络定义必须继承基类nn.Cell正确答案: B__init__()用于定义算子和网络层。所有需要用到的层(如卷积层、全连接层等)都应该在这里进行实例化。这部分代码由Python解释器执行。用于构建前向计算图。它调用在__init__()中定义好的算子和层来描述数据的流向。

qq_38334677的博客 1056

Linux 系统CPU 100% 怎么办?如何处理?

Linux 系统CPU 100% 怎么办?如何处理?

2409_89014517的博客 1295

嵌入式软考必备知识点:嵌入式系统开发中的重要概念和示例代码

在嵌入式软考中,有一些重要的知识点需要掌握,包括嵌入式系统的基本概念、编程语言、实时操作系统和硬件接口等。实时操作系统是一种专门设计用于嵌入式系统的操作系统,可以提供对任务调度、中断处理和资源管理等方面的支持。GPIO(通用输入输出):GPIO是嵌入式系统中常用的硬件接口,用于连接外部设备和嵌入式系统。以上是嵌入式软考中的一些必备知识点,包括嵌入式系统的基本概念、编程语言、实时操作系统和硬件接口。通过配置串口的波特率、数据位数和校验位等参数,可以实现与其他设备的可靠通信。一、嵌入式系统的基本概念。

PixeGO的博客 314

Linux cpu为什么会超过100% ?

00. 什么是cpu ? 中央处理器(CPU,Central Processing Unit)是一块超大规模的集成电路,是一台计算机的运算核心(Core)和控制核心(Control Unit)。它的功能主要是解释计算机指令以及处理计算机软件中的数据。 其实简单的说,他就是大脑,一颗电子大脑。通俗来讲,计算机的cpu就相当于人类的大脑,虽然不是主动指挥,但是通过遵循放置在计算机内存中的指令来实现指挥。它也做算术运算,如加法,减法,乘法等,可以作出决定和选择。 01. 相关概念 CPU物理个数:主板上实际插入的

qq_42226855的博客 2万+

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

【线上问题排查】CPU100%和内存100%排查

线上CPU和内存排查思路

BookSea的博客 5028

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

cpu占用率为什么有时会超过100%?

在多核系统中,CPU 使用率超过 100% 通常是正常现象,具体取决于监控工具的计算方式和系统配置。在虚拟机或容器化环境中,资源分配和监控可能会导致 CPU 使用率的显示异常。例如,虚拟化平台可能会分配多个虚拟 CPU 给一个物理 CPU 核心,导致监控工具显示的使用率超过实际物理核心的总和。这是由于某些任务在短时间内占用了大量的 CPU 资源,但这种情况通常不会持续很长时间,系统会自动调整回正常范围。某些情况下,监控工具本身可能存在 bug 或者系统中的驱动程序出现问题,导致 CPU 使用率显示不准确。

Dontla的博客 5126

迈瑞BS系列全自动生化分析仪LIS协议接口手册(内含HL7和ASTM)

迈瑞BS系列全自动生化分析仪LIS协议接口手册,内含HL7和ASTM)

node进程cpu 100%问题排查

nodejs 内存泄漏,cpu100%问题追踪一次线上事故新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 一次...

小喽喽 1万+

Linux CPU为什么会超过100%

Linux cpu

wangerzheng 2376

点了下详情系统,CPU 100%。。。

1、CPU100%的时候可以打印线程快照jstack pid,查看是哪个线程占用了CPU,一般都是某个业务线程阻塞无法进行GC回收导致。2、可以查看localhost_access_log查看系统接口用时,一般用时很久的都是有问题的接口。3、记得看业务代码参数有没有漏传,如果漏传参数可能会导致全表扫描直接卡死系统。1.1,000+ 道 Java面试题及答案整理(2022最新版)2.劲爆!Java 协程要来了。。。3.Spring Boot 2.x 教程,太全了!4.

Java技术栈,分享最主流的Java技术 146

CPU使用率100%怎么办

通过任务管理器(Windows按Ctrl+Shift+Esc)或Linux的top命令结束高占用进程,注意保留系统关键进程(如Windows的System Idle Process无需处理)。 重启资源管理器(Windows右键任务管理器重启explorer.exe)或直接重启系统释放异常资源。

link458的博客 1万+

Netty是如何解决epoll CPU占用100%问题的

epoll 100% CPU 问题由 Java NIO 的空轮询引起,通常源于epoll_wait的异常返回。Netty 的解决方案空轮询检测:通过selectCnt计数器检测连续空轮询,超过阈值(默认 512)触发。重建 Selector:创建新Selector,重新注册Channel,解决epoll问题。动态 select 策略:根据任务状态选择selectNow或,减少不必要调用。自适应超时:动态调整select超时时间,降低空轮询影响。异常处理:捕获等,保持循环稳定。在中的作用。

eclipseC的博客 1205
上一篇: SpringBoot 动态定时任务,配置写死,太Low了
下一篇: 「查缺补漏」,DDD 核心概念梳理
公众号-芋道源码
博客等级 码龄10年 1640粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值