反向传播

作用 反向传播的作用就是计算网络的参数 w ∗ , b ∗ w^{*} ,b^{*} w∗,b∗反向传播并不是和梯度下降不同的训练方法，他与梯度下降相同，但是在计算梯度向量的时候更加高效。 链式法则 对整个网络有，其损失函数为： L ( θ ) = ∑ n = 1 N l n ( θ ) L(\theta ) = \sum_{n=1}^{N}l^{n}(\theta ) L(θ)=∑n=1N​ln

>>阅读原文<<