神经网络-BP算法简单推导

相信很多人和我一样看了很多的博客，很多书始终对于BP算法都是一头雾水。 在看了很多的博客之后，多数为如下的一些计算步骤： 通过前向传播计算出各个层的输入，输出，以及计算出总的损失函数。 计算出每一层每个神经元的误差。 计算每个神经元权重或者偏置的梯度。  更新梯度。 里面总是出现一些公式很费解。 我通过一个简单的推导，来验证这些等式的同时，也对BP算法进行了推导。 下图是简单的神经网络结构。 由于

>>阅读原文<<