激活函数numpy实现(Sigmoid, Tanh, Relu, Softmax)

你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。

1.Sigmoid

$$sigmoid(y)=\frac{1}{1+e^{-x}}$$

2.Tanh

$$tanh(y)=2\ast sigmoid(2\ast x)-1$$

or

$$sigmoid(y)=1/2+1/2\ast tanh(1/2\ast x)$$

3.Relu

4.Softmax