python运行文件跑起来很多epoch之后突然需要更改
重新跑
结果显示没有内存
nvidia-smi
用命令查看一下GPU运行情况
这种就是没有释放内存的情况
然后去清理一下缓存
查看占用的进程
nvidia-smi --query-compute-apps=pid,process_name,used_memory --format=csv
```
根据输出
这个进程就是GPU那个进程
把这个进程kill掉
然后再次查看
kill -9 38862
nvidia-smi

成功释放了缓存
接下了重新python之前的程序
成功跑起来