深度学习经常使用优化算法

深度解读最流行的优化算法：梯度降低 【本文转载自机器之心   翻译：沈泽江 原文地址：http://www.jiqizhixin.com/article/1857】 梯度降低法，是当今最流行的优化（optimization）算法，亦是至今最经常使用的优化神经网络的方法。本文旨在让你对不一样的优化梯度降低法的算法有一个直观认识，以帮助你使用这些算法。咱们首先会考察梯度降低法的各类变体，而后会简要地总

>>阅读原文<<