qq_41967963的博客

程序异常被kill，定位原因使用pytorch训练模型，收到了对应的信号 SIGTERM，从而对应的信号处理 handler 被调用，最终使得程序运行的进程被终止。由于输出显示程序收到了 SIGTERM 信号，所以尝试寻找发出对应信号的位置。由于发送信号需要经过操作系统 kernel，通过 dmesg 命令可以查看最近的内核操作(实际是输出了内核中记录行为的 kernel ring buffer 的内容)来查看是否存在相关的信息。dmesg 的 -T 选项表示显示命令的操作时间。grep：-E 参

Ubuntu设置GPU可见自己记录一下export CUDA_VISIBLE_DEVICES=0,1 #仅显卡设备0,1可见。

Ubuntu的终端重启命令终端命令重启终端命令重启自己记录一下，懒得搜了shutdown -h now --立即关机 shutdown -h xx:xx --到xx:xx（具体时间）关机，如果该时间小于当前时间，则到隔天 shutdown -h +5 --5分钟后自动关机 shutdown -r now --立即重启 reboot --立即重启...

ubuntu下查看占用gpu的进程跑程序的时候会遇到程序退出但显存未释放的情况，所以记录一下查看占用gpu的进程号以方便杀死进程#查看进程fuser -v /dev/nvidia*#杀死进程kill -9 PID