多层神经网络与反向传播算法

感知机 感知机就是我们前面学过的线性分类器加上一个激活函数。 线性分类器: v=wTx+b=(∑iwixi)+b 很多实际问题并不是线性可分的，所以需要用一个非线性函数将上述结果变为非线性的。 y=φ(v) 常用的激活函数有sigmoid 、tanh、ReLU、Softplus： 它们的函数图像分别是: sigmoid(x)=11+e−x tanh(x)=ex−e−xex+e−x ReLU(x)=

>>阅读原文<<