02.改善深层神经网络:超参数调试、正则化以及优化-优化算法

优化算法 文章目录 优化算法 2.1mini-batch 梯度下降 2.2理解mini-batch梯度下降法 2.3 指数加权平均数 2.4指数加权平均的偏差修正 2.5 动量梯度下降法 2.6 RMSprop 2.7 Adam 优化算法 2.8学习率衰减 2.1mini-batch 梯度下降 优化算法,这能让你的神经网络运行得更快。 虽然之前的向量化的方法能够让我们较快地处理样本数据,但是当样本
相关文章
相关标签/搜索