吴恩达《深度学习》第二门课（2）优化算法

2.1Mini-batch梯度下降 （1）例如有500万个训练样本，这时可以每1000个组成一个Mini-batch,共用5000个Mini-batch。主要是为了加快训练。 （2）循环完所有的训练样本称为（1 epoch）。 （3）使用大括号X{t},Y{t}表示一个Mini-batch。（小括号（i）表示第i个样本，中括号[l]表示神经网络第l层）。 2.2理解mini-batch梯度下降法

>>阅读原文<<