机器学习——神经网络累积BP算法

在上篇的博客介绍的“标准BP算法”每次仅针对一个训练样例更新链接权和阈值,也就是说,BP算法中的更新规则是基于单个的 推导而得,若是相似的推导出基于累积偏差最小化的更新规则,就获得了累积偏差逆传播算法。累积BP算法与标准BP算法都很经常使用(标准BP算法和累积BP算法的区别相似于随机梯度降低(Stochastic gradient descent,简称 SGD)于标准梯度降低之间的区别)。通常来讲
相关文章
相关标签/搜索