神经网络的激活函数、并通过python实现激活函数

神经网络的激活函数、并通过python实现

    • what is 激活函数
    • 激活函数的python实现
      • python实现阶跃函数
      • python实现sigmoid函数
      • python实现ReLU函数
    • 激活函数的特点

what is 激活函数

感知机的网络结构如下:

左图中,偏置b没有被画出来,如果要表示出b,可以像右图那样做。
神经网络的激活函数、并通过python实现激活函数_第1张图片
用数学式来表示感知机:
神经网络的激活函数、并通过python实现激活函数_第2张图片
上面这个数学式子可以被改写:

我们表达的意义是:输入信号的总和被h(x)转换成输出y。<

你可能感兴趣的:(学习笔记,python,机器学习,神经网络)