nvidia-smi 无进程占用GPU,但GPU显存却被占用

nvidia-smi 无进程占用GPU,但GPU显存却被占用了很多_学无止境-CSDN博客_gpu被占用

可以发现4 卡 7 卡 这种情况

gpustat -cpu

[4] GeForce RTX 2080 Ti | 40'C,   0 % |  3286 / 11019 MB |
[5] GeForce RTX 2080 Ti | 30'C,   0 % |     3 / 11019 MB |
[6] GeForce RTX 2080 Ti | 56'C,  40 % | 10442 / 11019 MB | user:python/1941(10435M)
[7] GeForce RTX 2080 Ti | 35'C,   0 % | 10989 / 11019 MB |

解决:

每个用户 fuser -v /dev/nvidia*

kill -9 非正常停止的进程

你可能感兴趣的:(知识,深度学习,pytorch,神经网络)