深度学习训练已经停止(强行中断)了,可GPU内存还在占用着,如何解决?

watch --color -n1 gpustat -cpu

用户:xujiping 已经结束训练了,但是GPU的内存仍然在占用

深度学习训练已经停止(强行中断)了,可GPU内存还在占用着,如何解决?_第1张图片

top:查看进程

深度学习训练已经停止(强行中断)了,可GPU内存还在占用着,如何解决?_第2张图片

U :输入用户名

深度学习训练已经停止(强行中断)了,可GPU内存还在占用着,如何解决?_第3张图片

深度学习训练已经停止(强行中断)了,可GPU内存还在占用着,如何解决?_第4张图片

找到 python train.py 的进程号

ctrl + c 退出

kill -9 进程号:杀死残留的进程

这时占用的GPU内存就被释放了

 

reference: https://blog.csdn.net/u014264373/article/details/108106316

你可能感兴趣的:(深度学习)