Batch GD/Mini-batch GD/SGD/Mini-batch SGD/Online GD

用下面的损失函数来做为例子:函数 参数更新公式为:spa 1. Batch GDblog 对于 Batch GD, m 是整个 batch 大小, 它用整个集合的数据来更新参数。im 2. Mini-batch GD数据 整个 batch 被分为几个小的 mini-batches, m 是 mini-batch 的大小。img 3. SGD/Mini-batch SGD集合 m=1,在全部数据上迭
相关文章
相关标签/搜索