深度学习之BatchNormalization

首先关于BN的文章是这一篇,大家可以下载下来看一下。 《Batch Normalization: Accelerating Deep Network Training by Reducing Internal Covariate Shift》 貌似是两位google的大佬写的。 总结一下BN的好处: 加速训练收敛速度; 可以使用较大的学习率; 允许在深层网络中使用sigmoid这种易导致梯度消失的
相关文章
相关标签/搜索