深度学习之各类优化算法

机器之心编译python 参与：沈泽江git 　　梯度降低法，是当今最流行的优化（optimization）算法，亦是至今最经常使用的优化神经网络的方法。本文旨在让你对不一样的优化梯度降低法的算法有一个直观认识，以帮助你使用这些算法。咱们首先会考察梯度降低法的各类变体，而后会简要地总结在训练（神经网络或是机器学习算法）的过程当中可能遇到的挑战。github 　　目录：算法 梯度降低的各类变体服务器

>>阅读原文<<