深度学习训练算法

越复杂的神经网络 , 越多的数据 , 我们需要在训练神经网络的过程上花费的时间也就越多. 原因很简单, 就是因为计算量太大了. 可是往往有时候为了解决复杂的问题, 复杂的结构和大数据又是不能避免的, 所以我们需要寻找一些方法, 让神经网络训练快起来。 Stochastic Gradient Descent (SGD) 上图中红色方块是我们要训练的 data, 如果用普通的训练方法, 就需要重复不断

>>阅读原文<<