Ubuntu实时监控GPU显存和CPU内存的使用情况

最新推荐文章于 2025-04-16 10:58:36 发布
原创 最新推荐文章于 2025-04-16 10:58:36 发布 · 5.9k 阅读 · 8 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍如何使用top命令来实时查看CPU和内存使用情况，并通过watch和nvidia-smi组合使用来实时监测GPU及其显存的使用状态。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在跑一些程序，例如deep learning的时候，总是希望查看一下cpu、gpu、内存的使用率。

1. cpu、内存

使用top命令

$ top

这样会得到所有进程的CPU利用率和内存使用情况，如果想查看其中特定进程的CPU利用率和内存情况，可以使用以下命令：

$ top -p pid

其中pid为所想查看的进程的进程号（可以从top命令）中得到。

2. gpu、显存

大家都知道nvidia-smi可以显示GPU的使用情况，但是该命令只能显示一次，即此时GPU的状态。若要实时显示，可以配合watch命令, 让它一秒刷新一次，命令语句：

$ watch -n 1 nvidia-smi

 

ubuntu命令行监控cpu，gpu状态
Hello Word!
09-05 2007
# GPU用量 间隔1秒刷新 $ watch -n 1 -d nvidia-smi # CPU 用量排序: 在命令行提示符执行top命令 $ top # 输入大写P，则结果按CPU占用降序排序。输入大写M，结果按内存占用降序排序。也可以shift+m 或shift+p ...
GPU实时监控神器：从 nvidia-smi 到 nvtop
weixin_43887510的博客
04-24 1317
在使用 GPU 训练深度学习模型或进行大规模计算任务时，实时监控 GPU 状态对于合理分配资源、优化性能至关重要。本文将介绍两个非常实用的GPU监控工具：经典的nvidia-smi和更加直观、互动的nvtop。两块 4090 正在高强度运行（91%），说明模型或者任务在跑。显存都占用了一部分，但没有满，说明显存压力不是特别大。没有明显过热现象。进程中多为 python 程序，使用的是 miniconda 环境。两块 RTX 4090 GPU 当前负载较低（基本没跑大的模型或推理任务）
Linux上实时查看GPU 使用、显存占用
Dinsanity的博客
04-16 663
nvidia-smi：静态查看GPU使用情况：1代表每隔1秒刷新一次GPU使用情况。
ubuntu下实时查看CPU，内存（Mem）和GPU的利用率
m0_49384824的博客
10-09 1万+
在启用 MIG 的情况下，一张 GPU 可以分割为多个逻辑 GPU，每个逻辑 GPU 分配固定的计算和显存资源。例如，只有支持 MIG 的 NVIDIA GPU（如 A100 或 H100）才会显示 MIG 相关的信息，而其他不支持的 GPU 显示。：这是 NVIDIA 提供的一个命令，用于显示 GPU 的实时信息，包括显卡的温度、功耗、显存使用率、GPU 负载等。：在这个模式下，只有一个进程能够使用 GPU 的计算资源，但该进程可以有多个线程。：默认计算模式，多个进程可以同时访问 GPU 的计算资源。
ubuntu查看显存占用信息
Hanscal
07-12 3836
nvidia-smi命令可以输出显存占用进程： 如果已经没有进程占用某个GPU，但是某个GPU显存仍然是被占用的。这个时候使用该命令，可以查看GPU被使用情况，列出使用的用户和进程信息。
ubuntu下查看CPU/GPU/内存使用率
热门推荐
Avalon
11-15 4万+
在跑一些程序，例如deep learning的时候，总是希望查看一下cpu、gpu、内存的使用率1. cpu、内存使用top命令$ tophttp://bluexp29.blog.163.com/blog/static/33858148201071534450856/2. 查看gpu使用 nvidia-smi 命令$ nvidia-smi但是这个命令只能显示一次，如果要实时显示，配合watch命令,
Ubuntu系统进行深度学习时查看GPU、CPU实时使用情况等
qq_44722189的博客
04-05 5373
纳入内核管理的内存不见得都在使用中，还包括过去使用过的现在可以被重复利用的内存，内核并不把这些可被重新使用的内存交还到free中去，因此在linux上free内存会越来越少，但不用为此担心。对于内存监控，在top里我们要时刻监控第五行swap交换分区的used，如果这个数值在不断的变化，说明内核在不断进行内存和swap的数据交换，这是真正的内存不够用了。，显卡是由GPU和显存等组成的，显存和GPU的关系有点类似于内存和CPU的关系。第四行中使用中的内存总量（used）指的是现在系统内核控制的内存数，
Linux/Ubuntu 监视，实时查看GPU，CPU和内存使用情况
亲亲Friends的博客
11-20 9247
注意 本文方案仅适用于NVIDIA显卡，对于Intel显卡和AMD显卡本文暂不做讨论。毕竟NVIDIA的显卡才是训练神经网络的大众之选。 方案1 使用nvidia-smi命令，输出为： 如果想要不间断持续刷新GPU的状态，使用： nvidia-smi -l seconds nvidia-smi --loop=seconds 上述命令任选其一，注意把seconds换成你想刷新的时间间隔（秒）。命令运行的效果就是持续输出上图中的内容（注意不是在原有输出上进行刷新，而是持续输出新的信息）。按Ctrl+C停止刷
在 Ubuntu 中监控 CPU 和 GPU 的 2 个图形可视化工具
努力加油，冲~
02-23 1万+
Sysmon 对以下数据进行了图形可视化： CPU 利用率和每核时钟速度 GPU 利用率和时钟速度（目前只有 Nvidia）。应该与多个 GPU 一起工作（未经测试） 内存和交换利用率 网络利用率（WLAN 和以太网）。WLAN 链路带宽不断更新。 HDD/SSD 利用率。 安装运行： pip install sysmon 要运行该程序，只需在终端中运行： sysmon 如果您想监控您的 Nvidia GPU，则必须安装 nvidia-smi。 官方链接 Conky 这是一个极具创造力的小工具，我
如何监控和改进用于深度学习的 GPU 使用率？
weixin_50197960的博客
10-13 2737
如果您刚刚为您的下一个很棒的深度学习项目购买了一些漂亮的闪亮 GPU，并且已经开始工作。您可以听到风扇呼呼的声音（或者您可以想象它们在云中某处呼呼），但您如何确保充分利用这些 GPU？下面我们将介绍一些可用于监控 GPU 的工具。检查它们的利用率、温度和内存使用情况。我们将介绍如何安装它们，它们最擅长什么，以及如何使用它们的一些技巧。通过确保充分利用 GPU，您至少可以确保它们尽可能快地运行现有模型（更改模型以使其尽可能高效是另一个话题）。
训练过程中如何开发一个exportor实时监控gpu资源以及进程运行情况
最新发布
04-28
接下来，我需要确定用户的需求：他们可能在进行机器学习训练，需要监控GPU的使用情况（如显存、利用率、温度）以及相关进程的状态（如CPU/内存占用）。用户可能希望将这些指标导出到Prometheus，方便实时监控和告警...
Ubuntu下系统CPU/内存/GPU/硬盘监控查看指令
youlinhuanyan的博客
01-19 7850
CPU、内存、GPU、硬盘查看
Ubuntu监视显卡、CPU占用情况
gsgbgxp的博客
11-25 2350
在 Linux 终端中定期执行nvidia-smi命令并显示其输出
ubuntu下查看GPU真实使用情况的方式及解决显存不够的一般方法（gpustat）
weixin_45347379的博客
03-02 3911
ubuntu下查看GPU真实使用情况的方式及解决显存不够的一般方法（gpustat）
ubuntu下监督显存使用情况
qq_40212975的博客
11-10 242
watch [options] command 例：每隔5秒监视一次 watch -n 5 nvidia-smi
Ubuntu下实时查看Nvidia显卡显存占用情况
FernandoNino的博客
05-14 3007
#watch -n 5 nvidia-smi 其中，5表示每隔5秒刷新一次终端的显示结果。
ubuntu: 监控GPU使用情况
JNing
04-14 6172
ubuntu: 监控GPU使用情况
ubuntu 监视GPU使用情况
ytusdc的博客
12-24 7093
1、CPU使用情况 （1）$ top （2）另一个更直观的命令htop，首先要安装htop $ sudo apt-get install htop $ htop 2、GPU使用情况 使用watch命令 watch 命令简介 watch是做什么的？看一下系统怎么说 $ whatis watch watch(1)        - execute a program periodical...
Ubuntu 20.04 实时查看GPU使用情况
Kiiiim
05-12 8394
使用两种方法，实时查看 GPU 使用情况 1. nvidia-smi 使用终端命令 nvidia-smi 查看显卡信息 如果你想实时检测显卡使用情况，添加 watch -n 即可 watch -n 4 nvidia-smi 其中，4 是指 4 秒刷新一次终端，可以根据自己的需求设置 2.gpustat 安装过程很简单，直接 pip 即可（本人是这样） 使用 gpustat --json 以 json 形式呈现 gpu 信息 使用 gpustat -i 命令可以查看用户使用 gpu 情况 使用以下命令，可以
实时查看gpu使用率
01-30
### 实现 GPU 使用率实时监控 对于实现 GPU 使用率的实时监控，有多种方法可供选择。 #### 方法一：使用 `watch` 和 `nvidia-smi` 通过组合 `watch` 命令与 `nvidia-smi` 来定期获取并展示 GPU 的状态信息。这种方式能够提供简洁明了的数据更新视图： ```bash watch -n 1 nvidia-smi ``` 上述命令会每隔一秒刷新一次 GPU 状态，包括但不限于显存占用量、GPU 温度以及功耗等重要参数[^1]。 #### 方法二：利用专门设计的应用程序——Nvtop 为了获得更加直观且详细的监测体验，推荐采用 Nvtop 这样的专用软件。该应用程序提供了类似 htop 的交互式界面来跟踪 GPU 性能指标的变化趋势，支持多维度数据可视化呈现，如温度曲线、内存利用率图表等特性，极大地提高了用户体验感和操作便捷性[^3]。 安装 Nvtop 后可通过如下方式启动它来进行持续性的观察工作： ```bash sudo apt-get install nvtop nvtop ``` #### 方法三：gpustat 工具 另一种高效的选择是 gpustat ，此工具不仅具备美观大方的文字高亮效果，还能清晰地标记出具体的 GPU 名称及其使用者身份信息。不过需要注意的是，默认情况下它不会自动罗列各进程详情；如果仅需关注即时概况而不必深入了解具体应用层面上的内容，则非常适合选用这种方法[^4]。 要以彩色模式每秒钟更新一次 GPU 状态，可执行下面这条指令： ```bash watch -n 1 -c gpustat --color ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值