谁挡了我的神经网络？（二）—— 优化算法

谁挡了我的神经网络？（二）—— 优化算法 这一系列文章介绍了在神经网络的设计和训练过程中，可能提升网络效果的一些小技巧。前文介绍了在训练过程中的一系列经验，这篇文章将重点关注其中的优化算法部分。更新于2018.11.1。 文章目录 谁挡了我的神经网络？（二）—— 优化算法 前言 Adam 参数 什么是Adam算法 Adam的工作原理 Adam的有效性 参考文献 前言 在训练的过程中，选择的优化算法

>>阅读原文<<