浅谈BN

为什么要用到BN? 解决Internal Covariate Shift 什么是Internal Covariate Shift? Batch Normalization的原论文作者给了Internal Covariate Shift一个较规范的定义:在深层网络训练的过程中,由于网络中参数变化而引起内部结点数据分布发生变化的这一过程被称作Internal Covariate Shift。 我们定义
相关文章
相关标签/搜索