李宏毅机器学习笔记（8）：backpropagation

0 引言        回顾一下之前学习过的，在求解神经网络时，我们通常使用梯度下降算法进行求解。        首先，先自定义一组参数作为我们的起始值，之后计算我们需要使用的梯度，有了梯度之后就可以利用它进行迭代求解了，如图0-1。        显而易见的是，在一个神经网络中，可能参数数目成千上万，远超过我们的想象，那么这么庞大的计算量，我们就需要一些可以辅助我们的工具。backpropaga

>>阅读原文<<