nvidia-smi 风扇和电源显示ERR (Fan and Usage ERR)

问题分析

在显卡上长时间运行很多的程序, 导致显卡过热, 出现问题.

解决方法

  1. 停掉 所有 在显卡上运行的程序, ERR会消失
  2. 设置显卡的persistence mode, 按照这个教程.
  3. 限制最大的运行功率不要太大
sudo nvidia-smi -pl 200 -i 2 # 指定卡2的最大功率为200

再次运行nvidia-smi显示卡2的运行功率已经调整好了

+-----------------------------------------------------------------------------+
| NVIDIA-SMI 440.33.01    Driver Version: 440.33.01    CUDA Version: 10.2     |
|-------------------------------+----------------------+----------------------+
| GPU  Name        Persistence-M
+-----------------------------------------------------------------------------------------+ | NVIDIA-SMI 570.133.07 Driver Version: 570.133.07 CUDA Version: 12.8 | |-----------------------------------------+------------------------+----------------------+ | GPU Name Persistence-M | Bus-Id Disp.A | Volatile Uncorr. ECC | | Fan Temp Perf Pwr:Usage/Cap | Memory-Usage | GPU-Util Compute M. | | | | MIG M. | |=========================================+========================+======================| | 0 NVIDIA RTX A6000 On | 00000000:01:00.0 Off | Off | | 31% 52C P8 29W / 300W | 701MiB / 49140MiB | 0% Default | | | | N/A | +-----------------------------------------+------------------------+----------------------+ | 1 NVIDIA RTX A6000 On | 00000000:25:00.0 N/A | N/A | |ERR! ERR! P0 N/A / N/A | 4967MiB / 49140MiB | N/A Default | | | | ERR! | +-----------------------------------------+------------------------+----------------------+ | 2 NVIDIA RTX A6000 On | 00000000:41:00.0 Off | Off | | 30% 44C P8 25W / 300W | 25726MiB / 49140MiB | 0% Default | | | | N/A | +-----------------------------------------+------------------------+----------------------+ | 3 NVIDIA RTX A6000 On | 00000000:61:00.0 Off | Off | | 30% 38C P8 21W / 300W | 25726MiB / 49140MiB | 0% Default | | | | N/A | +-----------------------------------------+------------------------+----------------------+ | 4 NVIDIA RTX A6000 On | 00000000:C1:00.0 Off | Off | | 30% 39C P8 28W / 300W | 25726MiB / 49140MiB | 0% Default | | | | N/A | +-----------------------------------------+------------------------+----------------------+ | 5 NVIDIA RTX A6000 On | 00000000:E1:00.0 Off | Off | | 30% 38C P8 29W / 300W | 25726MiB / 49140MiB | 0% Default | | | | N/A | +-----------------------------------------+------------------------+----------------------+ 能确定是哪张卡出问题了吗
最新发布
06-06
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值