优化算法-2：动量梯度下降法

本文来自于网易云课堂 指数加权平均 指数加权平均在统计学中也称为指数加权移动平均。为了更好的理解这个术语，我们以温度随天数变化为例介绍。 上图是温度随天数变化的散点图，为了计算温度随天数的变化趋势，我们引入公式： vt=βvt−1+(1−β)θt，θt是指当天的温度,vt是指当天的移动平均温度 v t = β v t − 1 + ( 1 − β ) θ t ， θ t 是 指 当 天 的 温 度

>>阅读原文<<