eps的作用

 

eps的作用_第1张图片

 

 

eps作用:

1.  eps是为了防止分母为0,一般可以取1e-4到1e-8之间。

eps的作用_第2张图片

2.   在BatchNorm中:

eps a value added to the denominator for numerical stability. Default: 1e-5

Eps为数值稳定性而在分母上加一个值。默认值:1 e-5

 

你可能感兴趣的:(深度学习&机器学习)