2、AI学习笔记|优化算法

              一、mini-batch 在实际项目中,训练集很庞大,一次性加载不只硬件没法知足,并且大数据量使得神经网络进行一次梯度降低就须要很长时间。算法 batch梯度降低:使用整个训练集训练模型网络 mini-batch梯度降低:将庞大的训练集拆分红一个个小的训练集,依次使用小的训练集进行训练。大数据 随机梯度降低:将一个样本当作一个子训练集blog mini-batch的合理
相关文章
相关标签/搜索