深度学习优化算法

文章目录 深度学习优化算法 1梯度下降算法的三个变种 Batch gradient descent Stochastic gradient descent(SGD) Mini-batch gradient descent 2 梯度下降算法的痛点 3 各种梯度下降算法 Momentum Nesterov accelerated gradient Adagrad Adadelta RMSprop Ad

>>阅读原文<<