深度学习 --- 改善深度神经网络 2

文章目录 1. 参数初始化方法 2. 深度学习优化算法 2.1 Mini-Batch Gradient Descent 2.2 Gradient Descent With Momentum 2.3 RMSprop[Root Mean Square prop] 2.4 **Adam[Adaptive Moment Estimation]** 3 其他加速训练的方法 3.1 Learning rate

>>阅读原文<<