nvidia-smi监测GPU状态

这是服务器上GTX1080的信息。
上面的表格中：
第一栏的Fan：N/A是风扇转速，从0到100%之间变动，我们的风扇转速为55%。
第二栏的Temp：是温度，单位摄氏度。当前82摄氏度。
第三栏的Perf：是性能状态，从P0到P12，P0表示最大性能，P12表示状态最小性能。
第四栏下方的Pwr：是能耗，上方的Persistence-M：是持续模式的状态，持续模式虽然耗能大，但是在新的GPU应用启动时，花费的时间更少，这里显示的是off的状态。
第五栏的Bus-Id是涉及GPU总线的东西，domain:bus:device.function
第六栏的Disp.A是Display Active，表示GPU的显示是否初始化。
第五第六栏下方的Memory Usage是显存使用率。 我们8G的显存使用了5G左右。
第七栏是浮动的GPU利用率，我们的利用率是95%
第八栏上方是关于ECC的东西。
第八栏下方Compute M是计算模式。

下面一张表示每个进程占用的显存使用率。我们运行的caffe占用了4G多的显存。