神经网络训练中Epoch、batch_size、iterator的关系

为了理解这些术语的不同，需要先了解些机器学习术语，如：梯度下降 梯度下降 这是一个在机器学习中用于寻找最佳结果（曲线的最小值）的迭代优化算法。 梯度的含义是斜率或者斜坡的倾斜度。 下降的含义是代价函数的下降。 算法是迭代的，意思是需要多次使用算法获取结果，以得到最优化结果。梯度下降的迭代性质能使欠拟合的图示演化以获得对数据的最佳拟合。 梯度下降中有一个称为学习率的参量。如上图左所示，刚开始学习率更

>>阅读原文<<