梯度的概念

函数变化率、梯度、方向导数


1.损失函数需要越变越小

2.损失函数在某一个方向的的方向导数越大,在这一个方向的变化率越大

3.损失函数在沿着梯度方向的方向导数最大,即沿着梯度方向变化率最大




你可能感兴趣的:(梯度的概念)