记录一次ubuntu服务器CPU占用100%的问题排查过程

最新推荐文章于 2025-03-26 16:10:14 发布

ideaoverflow

最新推荐文章于 2025-03-26 16:10:14 发布

阅读量9.3k

点赞数 3

文章标签： ubuntu

本文链接：https://blog.youkuaiyun.com/ideaoverflow/article/details/116357006

版权

最近在ubuntu服务器上跑深度学习的训练程序，运行一段时间程序就会被kill，给实验带来了不少麻烦。作为linux小白，着实是被这个问题困扰了一段时间，现将最后成功的方法记录下来。

关于这类问题，最常见的原因是系统内存不足，触发了OOM killer。于是先用htop查看系统的资源使用情况：

在这里插入图片描述

发现系统内存仍然是充足的，但是所有CPU核心都是100%占用。所以应该不是内存不足的问题，而是因为CPU爆满了。CPU主要是被一批“python”进程占用了。尽管这批进程的启动命令都显示为“python”，但没有参数，看起来不像正常的程序。用kill -9命令杀死这些进程，发现过一段时间又会重新出现。由于服务器之前中过挖矿病毒，所以这次也怀疑是中了挖矿病毒。

用 “ll /proc/进程ID” 查看进程信息（由于中间曾经杀死过进程，这里截的两张图的进程ID号不同）：

在这里插入图片描述

发现进程是由/usr/bin/-bash文件启动的，且该文件已被删除。可以猜测这个文件只是一个临时文件，不是真正的病毒文件，这个路径可能也是临时的，真正的病毒文件可能每次会随机选择一个目录生成临时文件，启动进程后再把临时文件删除，以便隐藏自己。

由于这些进程被杀死后又会重新出现，所以怀疑其背后还有守护进程或者

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

ideaoverflow

关注关注

3
点赞
踩
9

收藏

觉得还不错? 一键收藏
2
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

优化Ubuntu系统以降低CPU使用率

InjeProgram的博客

09-25

1266

为了提高系统的效率和响应能力，可以采取一些方法来优化Ubuntu系统，并降低CPU的使用率。本文将介绍一些常用的方法和技巧，来帮助您加速Ubuntu系统并降低CPU的使用率。通过更新系统、停止不必要的服务、优化启动项、使用轻量级软件、优化图形效果、禁用不必要的后台进程以及使用优化工具，您可以加速Ubuntu系统并降低CPU的使用率。如果您的系统性能受到影响，您可以降低图形效果的负载。您可以检查并禁用不需要的后台进程。首先，确保您的Ubuntu系统已经更新到最新的版本，并且所有的软件包都是最新的。

CPU 占用率 100% 排查五步法

蔡定努

07-29

497

Arthas 是一款线上监控诊断产品，通过全局视角实时查看应用 load、内存、gc、线程的状态信息，并能在不修改应用代码的情况下，对业务问题进行诊断，包括查看方法调用的出入参、异常，监测方法执行耗时，类加载信息等，大大提升线上问题排查效率。对于线上问题定位来说，分秒必争，所以我们在编码过程中，除了要实现业务功能交付，还要追求代码质量，要写出更高效、更优雅的代码。当然，除了使用上面的基础方法外，还有很多工具可以直接使用，例如阿里的 Arthas。的占用 CPU 是最高的，直接是 100%。

2 条评论您还未登录，请先登录后发表或查看评论

ubuntu中top命令详解

04-26

ubuntu中top命令详解每个参数的作用和意义

ubuntu运行很慢解决方案，常常CPU使用率占100%

swqqcs的专栏

05-07

9470

　　这几天用的时候感觉机器慢的跟头牛似的而且硬盘灯一直在闪不知道在干什么，top了一下才发现有一个叫做于是ps -e发现有一个叫做deskbar-applelet 估计这个就是了，于是sudo apt-get remove deskb

轻松解决Ubuntu系统CPU占用过高问题，告别卡顿！

最新发布

weixin_44012667的博客

03-26

378

轻松解决Ubuntu系统CPU占用过高问题，告别卡顿！

新手教学系列——kswapd0 CPU占用100%问题解析与解决

weixin_41701856的博客

07-08

1541

通过这次异常问题的解决，我深刻认识到，即使是看似常规的问题，也可能有不寻常的原因。遇到类似情况时，务必要仔细排查各个细节，切勿掉以轻心。检查系统进程的用户：任何异常进程的执行用户都可能是问题的关键。及时终止异常进程：发现异常进程后，及时终止可以避免问题恶化。清理废弃账号：确保系统中没有多余的账号，以减少潜在的安全隐患。关注系统日志：定期检查系统日志，及时发现潜在问题。总而言之，系统运维中要时刻保持警惕，深入分析和解决问题的能力是确保系统稳定运行的关键。相信一句话，“事出反常必有妖”。

Ubuntu恶意文件导致CPU占用过高的解决方案

t168348879的博客

08-09

2762

今天在做一个系统的时候发现了一个问题，服务器卡得要死，排查发现内存使用正常，硬盘状态正常，但是发现CPU使用率达到了100% 1. 命令 top

ubuntu病毒.report_system 占用100% CPU

jekc2008的专栏

08-29

1284

查看进程。

ubuntu cpu 占有率 100%

lcbwlx的专栏

03-14

6955

安装完gnome3之后，打开moniter一看，双核cpu总有一个100%，剩下那一个也是超过50%，我去，虽然我的电脑是5年前的机子，但也不能这样对我吧…… 但看moniter里面的进程，发现没有什么cpu使用率很高的进程，心中疑惑不解，于是在命令行中输入top，这才发现，是lightdm搞的鬼。于是果断的安装gdm，然后切换。安装gdm

记一次服务器CPU占用100%的故障排查经历

chubo4699的博客

01-29

381

线上有个web系统最近一直不稳定，不定时的服务器cpu就耗完，占用100%。重启tomcat后恢复正常，以后又会无规律的达到100%，满负荷运行。首先想到的是有任务在后台一直运行或者代码有死循环，检查代码，关掉各种定时任务后更新服务器，还是会出现耗完cpu的现象。于是用jstack把对...

Ubuntu16.04:fwupd ghome-software占用一个cpu100%解决办法

Yan

01-31

2291

From:http://blog.youkuaiyun.com/qq_33848737/article/details/77905677 1：在终端输入 top ，查看fwupd ghome-software进程的id号。 2：输入 sudo kill id，把进程kill掉。 3：在终端继续输入 sudo apt-get install -f 或者 sudo dpkg –configure -a

php-fpm 占用CPU过高，100%的解决方法

09-15

文章中提到了一个具体的案例：在部署了一个基于LNMP（Linux + Nginx + MySQL + PHP）架构的网站之后，原本运行平稳的服务器突然出现了CPU占用率飙升至100%的情况。进一步通过`top`命令观察，发现是php-fpm进程导致的...

使用dotnet-dump 查找 .net core 3.0 占用CPU 100%的原因解析

10-16

在这个程序中，创建一个无限循环的任务，目的是模拟 CPU 使用率为 100% 的场景。 3. 通过 dotnet tool install 命令全局安装 dotnet-dump 工具。 4. 通过修改环境变量 PATH，确保可以全局调用 dotnet-dump 工具。 5....

CPU使用率100%的故障排查记录

golfxiao的专栏

11-22

1074

注：这些数据在内存里持续了很长时间，SQL执行时间是在14:27分，但到合作方的运维同事抓jstack堆栈的14:47分时，线程仍然处于Runnable状态，说明这些数据已经在内存里常驻了至少20分钟以上。

记一次CPU 100%的问题排查过程

Hi，我是sharkchili，优快云 Java领域博客专家，开源项目JavaGuide维护人员，我想写一些有意思的东西，希望对你有帮助。

03-19

2683

某些上午吃完早餐准备开始一天的工作，突然收到阿里云的短信警告，说明服务器存在恶意脚本，消息如下:当时不以为意，直到我们进行docker镜像打包时发现了不对劲，ssh始终登录不上，镜像打包也久久不能完成，大概率推断服务器出事了。登录阿里云查看CPU。

Ubuntu23.04开机时whoopsie-upload-all占用CPU 100%，风扇狂转

qq_33653203的博客

05-15

578

Ubuntu23.04开机时whoopsie-upload-all占用CPU 100%，风扇狂转

解决腾讯云Ubuntu服务器突然CPU100%占用+ssh连不上+网站打不开+实例重启很慢

Rudon滨海渔村的博客

02-15

3181

解决思路 1.ssh连到vps通过top查看cpu占用进程，kill掉 2.本机ssh失败的话，试下腾讯云在线工具：腾讯云控制台>实例>右边的“登录”按钮>IP+账密 3.还是失败？试下腾讯云实例普通重启（不勾选强制重启） 4.还是一个鸟样？试下腾讯云实例的强制重启 5.再不行，客服投诉参考腾讯云Linux系统vnc浏览器登录方式 - 云+社区 - 腾讯云 b)在云服务器列表的操作列，点击【登录】按钮即可通过 VNC 连接至 Linux 云服务器https://clo

服务器cpu占用100%，如何排查问题?

热门推荐

pengjunlee的博客

07-06

1万+

一、引子对于互联网公司，线上CPU飙升的问题很常见（例如某个活动开始，流量突然飙升时），按照本文的步骤排查，基本1分钟即可搞定！特此整理排查方法一篇，供大家参考讨论提高。二、问题复现线上系统突然运行缓慢，CPU飙升，甚至到100%，以及Full GC次数过多，接着就是各种报警：例如接口超时报警等。此时急需快速线上排查问题。三、问题排查不管什么问题，既然是CPU飙升，肯定是查一下耗CPU的线程，然后看看GC。 3.1 核心排查步骤执行top命令：查看所有进程占系统CPU的排序。极

服务器cpu一直处于100%解决思路

惠惠软件

11-22

2623

网友截图咨询：cpu一直处于100%，请问是什么原因所致？突然出现的，从昨天14点左右就这样子，服务器很卡，将所有网站，web服务，mysql服务，防火墙都停止了，

ubuntu服务器版指令

03-25

<think>好的，我现在需要回答用户关于Ubuntu服务器版常用指令和操作指南的问题。首先，用户提到了系统级指令，要求生成相关问题，并且回答需要结构清晰，引用相关站内内容。我需要确保所有数学公式用正确格式，但这里可能不涉及数学内容，所以重点在命令和指南。首先，我需要回忆Ubuntu服务器常用的命令。常见的包括系统更新、用户管理、权限设置、网络配置、服务管理、日志查看、软件包安装等。然后根据用户提供的引用，引用[1]和引用[2]是关于Ubuntu服务器操作命令和初步设置的，所以应该引用这些内容。用户希望得到操作指南，所以需要分步骤讲解。比如系统更新、用户管理、软件安装等部分。每个部分给出命令示例，并确保代码块格式正确。同时，生成相关问题，可能需要考虑用户后续可能的问题，比如如何安装特定软件、如何优化服务器等。需要注意回答结构清晰，分点说明，使用中文，并且每个引用的地方加上引用标识。例如在提到系统更新时引用[^2]，在命令概览引用[^1]。现在开始组织内容： 1. 系统更新与维护：包括apt update/upgrade，引用提到的更新软件包。 2. 用户与权限管理：adduser, usermod, chmod/chown。 3. 网络配置：ifconfig/ip addr，netstat/ss，ufw防火墙。 4. 服务管理：systemctl命令，引用[^1]中的服务管理部分。 5. 日志查看：journalctl和tail。 6. 软件包管理：apt install/remove，snap安装。 7. 文件操作：基本命令如ls, cd, cp等。 8. 进程管理：ps, top, kill。 9. SSH远程连接：安装和连接命令。 10. 定时任务：crontab的使用。然后生成相关问题，可能涉及优化、安全、故障排除、备份等。需要检查是否每个引用的地方都正确添加了脚注，并且没有遗漏重要命令。确保回答符合用户要求的结构，代码块使用正确格式，例如命令示例用反引号包裹，并标注语言类型如bash。</think>### Ubuntu 服务器版常用指令与操作指南 #### 1. 系统更新与维护 - **更新软件包列表** ```bash sudo apt update ``` - **升级已安装的软件包** ```bash sudo apt upgrade ``` - **自动清理无用依赖** ```bash sudo apt autoremove ``` 定期更新系统可确保安全性和稳定性[^2]。 #### 2. 用户与权限管理 - **添加新用户** ```bash sudo adduser <用户名> ``` - **将用户加入 `sudo` 组（赋予管理员权限）** ```bash sudo usermod -aG sudo <用户名> ``` - **修改文件权限** ```bash chmod 755 <文件名> # 设置权限为 rwxr-xr-x chown <用户>:<组> <文件名> # 修改文件所有者 ``` #### 3. 网络配置 - **查看网络接口信息** ```bash ip addr # 或使用旧版命令 ifconfig（需安装 net-tools） ``` - **检查端口占用** ```bash ss -tuln # 或 netstat -tuln ``` - **配置防火墙（UFW）** ```bash sudo ufw allow 22 # 允许SSH端口 sudo ufw enable # 启用防火墙 ``` #### 4. 服务管理 - **启动/停止服务** ```bash sudo systemctl start <服务名> sudo systemctl stop <服务名> ``` - **设置开机自启** ```bash sudo systemctl enable <服务名> ``` 服务管理是服务器运维的核心操作之一[^1]。 #### 5. 日志查看 - **查看系统日志（systemd 系统）** ```bash journalctl -u <服务名> # 查看特定服务日志 ``` - **实时监控日志文件** ```bash tail -f /var/log/syslog # 跟踪日志末尾变化 ``` #### 6. 软件包管理 - **安装软件** ```bash sudo apt install <包名> ``` - **卸载软件** ```bash sudo apt remove <包名> ``` - **使用 Snap 安装（适用于容器化软件）** ```bash sudo snap install <包名> ``` #### 7. 文件操作基础 - **查看目录内容** ```bash ls -l # 显示详细信息 ``` - **复制/移动文件** ```bash cp <源文件> <目标路径> mv <源文件> <目标路径> ``` #### 8. 进程管理 - **查看运行中的进程** ```bash ps aux | grep <进程名> ``` - **终止进程** ```bash kill -9 <PID> # 强制终止指定进程 ``` #### 9. SSH 远程连接 - **安装 SSH 服务端** ```bash sudo apt install openssh-server ``` - **从客户端连接** ```bash ssh <用户名>@<服务器IP> ``` #### 10. 定时任务（Cron） - **编辑当前用户的定时任务** ```bash crontab -e ``` - **示例：每天备份文件** ```bash 0 3 * * * tar -czf /backup/backup.tar.gz /data ``` --- §§ 1. 如何配置 Ubuntu 服务器的静态 IP 地址？ 2. 如何通过 `apt` 查找特定软件包？ 3. Ubuntu 服务器如何实现自动化备份？ 4. 如何监控服务器的资源使用情况（如 CPU、内存）？ 5. 服务器遇到无法启动的问题时，如何排查故障？ --- 通过上述操作指南，您可以快速掌握 Ubuntu 服务器的基础管理技巧。如需深入优化或解决复杂问题，建议结合具体场景进一步学习。