Layer Normalization

论文: Jimmy Lei Ba, Jamie Ryan Kiros, Geoffrey E. Hinton. Layer Normalization. arXiv:1607.06450html Batch normalization 对每一个channel或者hidden unit,求输入(mini-)batch上全部样本在这个channel上的均值和标准差。以后根据每一个channel上的均值
相关文章
相关标签/搜索