程序停止后GPU仍被占用

在跑深度学习程序的时候,有时强制终止程序,可是程序占用的GPU资源仍然没有被释放,被这个坑了好久,还以为是GPU一直被别人抢占了,结果是GPU资源泄露。

可以使用这个命令查看Linux系统GPU的使用情况

nvidia-smi

得到如图结果
GPU资源使用情况

此时可以手动kill掉占用GPU的进程,以此来释放GPU资源

kill -9 49461

若是使用了Screen命令在后台运行的程序终止后占用了GPU,也可以先关掉所有了Screen窗口来释放GPU

killall screen

当然直接kill掉进程也是可以的

猜你喜欢

转载自blog.csdn.net/zzldm/article/details/81663339