深度学习基础知识——激活函数

激活函数

如果没有激活函数引入的非线性特性,那么神经网络就只相当于原始感知机的矩阵相乘。

激活函数的性质

1、非线性

2、连续可微

3、范围

4、单调性

激活函数的类型

常见的激活函数

你可能感兴趣的:(深度学习基础知识——激活函数)