在服务器中查看gpu使用情况以及id，杀死进程方法

YL_python_C++_java YL_python_C++_java 博客等级 墨衍会员 · AI 创作全网分发 墨衍智能分发 本文由作者通过墨衍一键同步至各平台 1分发平台 4k累计阅读 4.1k平均单平台 已同步平台 优快云 微信公众号 微博 知乎 掘金 百家号 博客园 抖音 小红书 你的文章也可以这样分发 墨衍会员 ¥399起/年，写一次发全网 我也要 码龄7年
关注
原创 2022-08-23 13:55:08 4k 阅读 AI 写同款· GEO 优化 ›
【Pytorch】指定训练时使用的GPU ID 指定训练时使用的GPU ID//change default GPU device 阅读详情

1、查看使用情况

指令：

nvidia-smi

这个指令可以查看动态的使用情况

watch -n 1 -d nvidia-smi

top命令可以查看gpu使用占比

top

2、停止进程

kill id号

强制停止：

kill -9 id
收录于
linux

当前文章被收录于：

linux
12 篇文章 0 人学习
订阅专栏 查看详情
标签
#ubuntu #深度学习 #linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
查看GPU使用的最佳方式 查看GPU利用率的最佳工具nvitop 阅读详情

相关推荐

服务器GPU挖矿病毒排查与清除：从伪装python进程到系统加固

在服务器运维与深度学习开发中，GPU算力是核心资源，其异常高占用往往意味着严重的安全威胁。恶意软件通过进程伪装、持久化机制等技术手段，可长期隐匿并消耗计算资源，其中伪装成python进程的挖矿病毒是典型代表。这类病毒利用GPU的高并行计算能力进行加密货币挖掘，不仅导致资源浪费和电费激增，更暴露了系统漏洞。从技术原理看，病毒常通过弱密码爆破、软件漏洞或供应链攻击植入，并借助cron定时任务、systemd服务实现自启动。其工程危害在于隐蔽性强、清理不彻底易复发，直接影响模型训练、推理服务的稳定性与成本。针对此

weixin_33646989的博客 337

查看占用GPU资源的 进程所属docker容器，并杀死 docker 中的僵尸进程！

一台服务器，每个人在上面run一个容器，跑各自的代码，虽然通过nvidia-smi可以看到每个进程占用的GPU，但是不好找进程对应的容器id，就没法确认到底是谁占用了较多GPU。

weixin_43412762的博客 6219

ubuntu下实时查看GPU使用情况的两种方式（nvidia-smi、gpustat）及结束占用GPU进程的命令

要查看gpu占用，这里介绍两个方法，一个是官方的nvidia-smi，装完显卡驱动就能使用了；另一个是gpustat，更方便于查看gpu使用情况。

zeeq的博客 12万+

GPU训练时查看占用显存、杀死进程命令

GPU训练时查看占用现存、杀死进程命令

weixin_43702653的博客 6703

【进程丢失】pytorch DDP分布式训练10个epoch就丢失1个GPU进程

现象：已经重复发生过，而且掉进程的卡bus id不一样 Pytorch 版本 1.7.0 ，卡：titan rtx x 8 很奇怪的bug，目前分析的原因： batch size过大，每张卡显存占的太满，导致训练的时候显存爆了？问题：那为什么一开始不爆呢？程序有显存泄漏？ 显卡过热（这个目前应该不是引起的原因，因为散热风挡已经开到最大，温度最多70度左右） ...

Hello Word! 1320

跨阻放大器（TIA）的输入输出阻抗的定义、分析和影响因素

跨阻放大器（Transimpedance Amplifier，简称TIA）是一种常用于将电流信号转换为电压信号的放大器。在TIA电路中，输入阻抗是指输入端对电流信号的响应能力，输出阻抗是指输出端对负载电阻的驱动能力。本文将分别介绍TIA的输入和输出阻抗的定义、分析以及影响因素。

weixin_44378594的博客 1万+

Linux查看进程PID以及杀掉进程的方法

Linux作为一款多用户、多任务的操作系统，可以同时处理多个任务，每个任务的执行都由进程来实现。在每个进程执行的过程中，都会有一个唯一标识符，即称为进程ID。Linux系统有很多命令用来查看进程PID，下面介绍几种常用的查看进程PID的方法。

weixin_44001371的博客 3190

MATLAB自动驾驶（1）——预构建场景库

MATLAB自动驾驶（1）——预构建场景库

Ucicorn Gundam的博客 3268

如何杀死服务器出现的僵尸进程

讲解服务器中出现的僵尸进程。

qq_37977007的博客 2584

【ArcGIS Add-in编程】如何创建ArcMap的下拉菜单插件

step1. VS2010中创建一个空的解决方案step2.创建一个项目 直接点击finish。step3 为该项目创建项目，选择Menu，作为根菜单，而后修改xml中的items项，添加需要放在下拉菜单中的项目，例如一个按钮； step4 现在可以创建项目，作为菜单中的项目。为该项目添加新的项目，选择button 此时 xml文件中，多了该button的项目，将该项目添加到items

吃货小跟班的博客 4431

告别Vysor！用Scrcpy在Mac上无线投屏安卓手机（附魅族16th闪退修复实战）

本文详细介绍了如何在Mac上配置和使用开源投屏工具Scrcpy，实现安卓手机无线投屏的高效解决方案。从基础环境准备到高级功能调优，包括无线连接配置、输入控制增强、多设备管理和性能优化等实用技巧，特别针对魅族16th等机型的闪退问题提供了修复方案，帮助用户彻底告别Vysor等商业软件。

weixin_28712661的博客 396

如何查看并杀死僵尸进程

如何查看并杀死僵尸进程？ 最近工作过程中，发现好几台服务器出现僵死进程（如图）。   　　用下面的命令找出僵死进程 　　ps -A -o stat,ppid,pid,cmd | grep -e '^[Zz]' 　　命令注解： 　　-A 参数列出所有进程 　　-o 自定义输出字段 我们设定显示字段为 stat（状态）, ppid（进程父id）, pid(进程

windseeker2008的专栏 849

HFSS 3D Layout一键导入PCB，高效搞定微带线损耗仿真

在高速PCB设计中，信号完整性与电磁仿真是确保链路质量的关键环节。传统的HFSS手动建模流程繁琐且极易出错，尤其面对微带线、带状线等高频结构时，叠层参数、铜箔粗糙度等细节难以精准还原，导致仿真结果与实测偏差较大。HFSS 3D Layout模块提供了从EDA工具直接导入PCB文件的能力，完整保留走线、过孔、叠层及材料属性，结合精确的介质损耗模型与端口设置，大幅缩短建模时间并提升仿真精度。该技术广泛应用于DDR、SerDes等高速数字链路的设计验证，以及SI/PI工程师对PCB损耗性能的快速评估。本文从导入操

weixin_29191081的博客 257

GPU显存占用高却找不到相关进程或者是僵尸进程，一招彻底解决GPU幽灵显存占用问题

GPU显存"幽灵占用"问题解决方案 当nvidia-smi显示显存被占用但找不到对应进程时，会导致新任务因显存不足而失败。该问题通常由进程异常终止或残留的共享内存段导致。解决方案分两步：1)使用sudo fuser -k /dev/nvidia*终止所有关联进程；2)执行sudo ipcs -m | grep nvidia | awk '{print $2}' | xargs -I {} sudo ipcrm -m {}清理残留共享内存。完成这两步后，显存将完全释放，GPU可重新使用。

UGhostX的博客 2711

Python爬虫实战：全自动采集银行理财产品收益率数据

本文通过Playwright动态爬虫技术，成功实现了对银行理财产品收益率数据的实时采集，并通过 Pandas 数据清洗、SQLite 存储、调度自动化等模块，构建了一个可扩展的银行理财数据抓取系统。理财非儿戏，数据做决策。掌握银行收益信息是我们迈向理性投资的第一步。希望这套工具对你有所帮助！

2201_76125261的博客 1156

智能车图像处理14-进阶篇6--坡道的判定

这篇文章主要讲述智能车图像处理中 : 如何判断坡道

taiyuezyh的博客 9234

【linux】nvidia-smi 查看GPU使用率100%

linux服务器下使用 nvidia-smi or nvidia-smi -l 1【数字表示输出间隔】 命令查看GPU使用情况，三种情况 1、没有进程，GPU使用率为空 这种情况表示，没有进程占用GPU资源，属于为空的正常状态 2、有进程，GPU使用率在变化 我们如果想要终止进程 ps -ef|grep python kill -9 58828 # 58828是该进程id 当然，也可以杀死所有python进程 killall -9 python 以前写的博客有以上教程，戳我进入。 3、看

学无止境、积少成多、厚积薄发 7987

微信小程序 - 详细解决map地图上使用自定义图标图片或自定义样式进行markers标记点，手机真机运行时安卓系统、苹果ios系统会出现不显示标记点的问题（大概率安卓正常显示标记点，但苹果就加载失败）

微信小程序，map，地图组件，安卓android，苹果ios，真机调试，marker，标记点，在地图上标记，突然就不显示白屏了没动代码，自定义标记点icon，label动态数字，小程序地图markers标记点显示不出来，微信小程序map组件，地图加载后marker标记点ios设备不显示，android正常显示，添加多个标记点。安卓能正常显示标记点图标，IOS设备不显示标记点图标，map地图白屏不显示标记，图标真机调试不显示，自定义图标，报错，页面白屏，不报错也不显示，无法加载，图片展示不出来，iconPat

✅ 精选推荐文章 5956

方法-进程已经杀死但是显存还未释放怎么办(ubuntu)

训练程序ctrl+c后,依然显示显存占用。##查看后台的训练进程。

zwhdldz的博客 1551

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

怀旧版电脑GBC模拟器

再现原版GBC掌机的界面，电脑运行连游戏界面都一样大小，很怀旧，很真实，（英文版）强烈推荐，很小的文件，很难才找到的。

Linux服务器SSH客户端断开后保持程序继续运行的方法

在申请服务器连接到桌面后，在这期间如果关闭桌面的编辑器或网页端的jupyter界面后Linux系统会自动关闭所有进程，程序也会随之终止运行（被挂起），因此本文将通过使用nohup命令教大家一种在用户关闭编辑软件程序仍保持运行的方法。

qq_44949041的博客 9694

android 蓝牙通讯demo

android 下蓝牙通讯demo，实现了发现蓝牙，使能蓝牙，通过蓝牙发送消息。

关于进入到docker 容器中运行了程序后 杀死进程

问题： docker 容器内 运行程序后 遇到使用ctrl+c 杀不死程序 nvidia-smi 看不到 Processes，查看主机中PID号不能杀死容器内运行的程序。 解决： 在容器内使用：ps -aux 查看进程号 并杀死。 服务器中： nvidia-smi # 查看 gpu 使用情况 docker top "容器ID/容器名字" # 查看容器下 运行的程序 PID是主机上的 PPID是容器中的 但是具体要去容器内使用ps -aux 看PID 服务器中docker 容器内 中使用： ps -aux

DeathYmz的博客 2367

[debug]-linux下进入某文件夹卡死且任何指令无效/GPU显存无法释放且进程的PPID为init级

1.问题描述 linux某一文件夹导致shell卡死，具体表现为，任何指令输入无效，包括rm -rf 指令。 可以看到，这个文件夹像黑洞一样，只要涉及到这个文件夹，任何指令一律卡死。 2.问题查找 2.1.情况一 该文件夹中有一个服务挂载在该文件夹某一目录下，因突然关机等异常情况导致该服务无限制等待，机器重启后也不能正常连接。 1)首先，输入指令 mount -l 查看相关文件夹挂载情况，若发现某服务挂在到了当前文件夹。 2)解除挂载 umount -l /home/user3/yolov5/yolov

ai_faker的博客 2178

Linux服务器使用GPU技巧

进行深度学习实验的时候用pytorch-gpu，经常要与GPU打交道；所以经常遇到奇奇怪怪的问题；

东皇太一在此的博客 1543

怎样杀死僵尸进程

问题描述： 最近遇到一个问题，使用服务器上的4块gpu进行训练（使用了nohup），中断训练，使用了： kill -9 进程ID 训练是终止了，但是显卡却没有释放； 解决方法： nvidia-smi 发现内存泄露问题，即没有进程时，内存被占用 fuser -v /dev/nvidia* 发现僵尸进程 ps x |grep python|awk '{...

猫猫与橙子的博客 1159

Linux-top和htop查看进程相关信息

目录 1、动机 2、使用 top查看大进程 ll /proc/PID 查看运行的程序 ps -eo pid,lstart,etime | grep PID 查看进程+启动时间+运行时间 kill -9 PID 杀死进程(立即执行) 1、动机 最近发现服务器及其的卡顿，于是开始研究到底咋回事，无非就是cpu内存不足或者gpu资源不足导致的，中间也有可能出现内存泄露的问题，无论是哪一种，都可以通过top这个命令查看。 什么是内存泄露 内存泄漏也称作"存储渗漏"，用动态存储分配函数动态开.

图挖掘领域，新晋砖家 ☞ 未来可期，欢迎和静静一起学习交流吖 718

nvidia-smi无进程但是显卡被占满

这个命令查询到的进程ID（PID）是 nvidia-smi 自己维护的，而不是操作系统维护的真实进程ID，真实的PID可以通过其他方式（例如使用ps命令）获取。远程服务器，输入nvidia-smi，看到显存使用率（Memory Usage）几乎占满，但，显存利用率（GPU-Util）为0%。使用 pycharm 的 python console 进行调试的时候，调完之后要把进程终止掉，而不是把界面叉掉！显存使用率占满，说明有进程跑完之后，没有释放掉，一直静静地占着地儿。① jupyter不会释放显存。

m0_52848925的博客 4671
上一篇： 使用labelimg查看yolov5格式标注情况
下一篇： Git生成SSH密钥（在项目中上传以及删除文件）
点赞 0
评论 0
书签 书签 7
YL_python_C++_java
YL_python_C++_java
博客等级 码龄7年 1392粉丝 142原创
+ 关注 专栏目录 订阅专栏
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值