python人工神经网络 tensorflow_人工神经网络 tensorflow（一、简单介绍）

本系列会有一下内容：神经网络简单介绍，简单全连接，全连接mnist手写字识别，卷积全连接以及lenet5代码介绍。

介绍：

人工神经网络是一种比较优越的分类方法，模拟了神经元的信息传递。虽然咋一听觉得人工神经网络或者人工智能，或者深度学习这些字眼很高大上，离我们很遥远，但是入门理解起来还是很容易的，难的是如任何一门知识一般的深入。对于全连接，大体下面这个图就可以概述：y = [x1 x2] * [w1 w2]

即y = [x1 x2] * [w1, w2](对应相乘),在实际的神经网络中还会让相乘的结果加上偏置b，再经过激活函数，这样一层神经网络就计算结束了，当然，在实际的网络中， 可能会有很多层， 而每层又会有很多个节点。在整个网络经过：乘积求和，加偏置，过激活函数后，前向传播就结束了。接下来的是反向传播。这里涉及的公式很难懂，就不赘述，记住反向传播的功能：经过反向传播，来调整参数w的值。在tensorflow中，反向传播是不需要我们操心的，只需要一句代码就搞定了。

神经网络的主体步骤大概就是这样，反复地前向，反向计算，直到训练的w能够让计算的结果和实际的结果最接近为止。

tensorflow：

tensorflow使用的数据称作张量，表示多维数组

计算图，tensorflow在计算图中搭建前向，反向传播结构，但是在计算图中不使用数据计算。就好比，我们在计算图中搭建了城市的电路分配的具体线路，而不通电。

会话， tensorflow在会话中传入数据，通过搭建好的计算图训练神经网络，这里就相当于通电正式使用了。

下面介绍几个经常用的函数：

import tensorflow as tf

下面全都以tf表示

tf.Variable()：表示变量，我们在初始话参数w的时候会用到

tf.matmul()：矩阵相乘，在搭建前向传播网络的时候会用到

tf.nn.relu()：激活函数的一种，矩阵相乘的结果一般会经过激活函数(最后一层节点不用)

tf.placeholder()：占位，在搭建网络的时候，我们传入的不是具体的多少维的数据，需要用它来给传入数据占位

tf.reduce_mean(tf.square(计算的结果和实际的距离))：表示损失函数，这是最基本的

tf.train.GradientDescentOptimizer().minimize()：反向传播的一种方法，梯度下降，令损失值最小，当然还有其它的方法

tf.global_variables_initializer()：变量的初始化，这是在会话中必须的

tf.Session().run()：会话中的最重要的函数，表示计算特定的参数。

上面差不多就是搭建一个最基本的神经网络中的最重要的函数了。今天先介绍这些，下回上一个简单全连接神经网络的代码。