【音视频相关】nvidia-smi 命令扩展及问题分析举例(dmon/pmon/GPU性能相关)

最新推荐文章于 2025-10-07 12:12:27 发布

原创

最新推荐文章于 2025-10-07 12:12:27 发布 · 2.3k 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#音视频 #硬件架构 #测试工具 #linux

本文详细解读了nvidia-smi命令在监控NVIDIA GPU的性能，包括GPU使用率、时钟频率、PCIe速率、编解码性能指标，以及温度管理。通过实例分析，探讨了影响性能的因素和PCIE配置的实际应用。

nvidia-smi 常用命令：

`nvidia-smi dmon -s xxx` (device monitor) 查看设备的相关信息，下面是可选值

	如 nvidia-smi dmon -s t -i 1 查看gpu卡1的pcie读写带宽

p：电源使用情况和温度（pwr：功耗，temp：温度）
u：GPU使用率（sm：流处理器，mem：显存，enc：编码资源，dec：解码资源）
c：GPU处理器和GPU内存时钟频率（mclk：显存频率，pclk：处理器频率）
v：电源和热力异常
m：FB内存和Bar1内存
e：ECC错误和PCIe重显错误个数
t：PCIe读写带宽

`nvidia-smi dmon -i 0 -s mutc -d 1 -o TD` 使用该命令可以直接查看gpu卡0当前运行相关的信息

#Date       Time        gpu    fb  bar1    sm   mem   enc   dec rxpci txpci  mclk  pclk
#YYYYMMDD   HH:MM:SS    Idx    MB    MB     %     %     %     %  MB/s  MB/s   MHz   MHz
 20221215   15:43:54      1  3217    13    10    15   100    30    15    14  6250  1455
 20221215   15:43:55      1  3217    13     9    14    88    32    45    12  6250  1507
 20221215   15:43:56      1  3217    13     9    13    80    30    23     9  6250  1260
 20221215   15:43:57      1  3217    13     9    14    95    31    33    22  6250  1372
 20221215   15:43:58      1  3217    13    10    15   100    30    44    25  6250  1440
 20221215   15:43:59      1  3217    13    10    15   100    28    14    12  6250  1530
 20221215   15:44:00      1  3217    13    10    15   100    30    39    15  6250  1297

`nvidia-smi pmon -i 1` 使用该命令可以查看gpu卡1当前运行程序占用情况

# gpu        pid  type    sm   mem   enc   dec   command
# Idx          #   C/G     %     %     %     %   name
    1    3524892     C     8    13    95    29   Pangu          
    1    3524892     C     8    14    94    29   Pangu          
    1    3524892     C     8    14    95    30   Pangu          
    1    3524892     C     9    14    96    30   Pangu          
    1    3524892     C     8    14    96    30   Pangu