10-误差反向传播法(一)——计算图

误差反向传播法 上一篇文章介绍的是用数值微分法计算梯度,但这种方法比较耗时间,接下来介绍新的梯度计算法:误差反向传播法。在此之前,先介绍计算图。 一、计算图 计算图用节点和箭头表示,节点表示某种运算(可以是加减乘除等简单计算,也可以是一个复合运算),箭头上是某些参与计算的数据。 计算图分为正向传播和反向传播,下面这幅图,白色箭头是正向的,蓝色箭头是反向的。 局部计算 每个节点的计算只与当前节点及它
相关文章
相关标签/搜索