TensorFlow01:梯度下降

梯度消失:

学习过程中权重的值变的非常大,以至于溢出,导致NaN值。解决梯度消失的问题
1.重新设计网络    2.调整学习率   3.使用梯度截断(限制梯度的大小)  4.使用激活函数

 

转载于:https://www.cnblogs.com/jumpkin1122/p/11521024.html

你可能感兴趣的:(人工智能)