linux黑屏重启 caffe 训练深度学习网络crfasrnn deeplab

电脑配置:
型号:t3610
系统:Ubuntu14.04
GPU:GTX980Ti(显存6G)
电源:680W


1.deeplab v2网络训练时出现Data layer prefetch queue empty,几秒后Ubuntu黑屏自动重启
linux黑屏重启 caffe 训练深度学习网络crfasrnn deeplab_第1张图片

2 crfasrnn 网络训练是电脑运行到Iteration 0, Testing net (#0)就自动重启
linux黑屏重启 caffe 训练深度学习网络crfasrnn deeplab_第2张图片


别人的解决办法:
http://blog.csdn.net/zzchust/article/details/49279055此文综合引用分析了原因和解决方法。提出了三种引用方法:
1 使用lmdb替换txt文件,加快数据读取速度;
2 避免IO被频繁使用;
3 可以考虑不加入test.txt
其中:1我没有试过,2小白表示不知道怎样避免,3之前也没使用test.txt

于是,分析改文中提出“CPU慢于GPU”,我用了最简单粗暴的办法,重新装了一台电脑,换了性能更好的CPU和主板

我的解决办法:
我换了GPU,使用Titan X替换了GTX980Ti,但是问题依然存在。我的电脑是四核八线程,内存16G.由下图可知,我的cpu和GPU显示够用。
linux黑屏重启 caffe 训练深度学习网络crfasrnn deeplab_第3张图片

在搜集一两天之后发现,发现可能跟我的电源功率有一定关系,从下面链接可知,我的电源是680W,相对于其中所说的功率较小,换了一个830W的电源,解决了问题。

https://docs.google.com/presentation/d/1McEMHewtMOwhIyUSO_2AZxbeEwRihjF2Ql_eYQ6bq2o/edit#slide=id.p

你可能感兴趣的:(caffe)