深度学习各种normalization

各种Normalization层出不穷,现做一下总结,以供大家学习参考 1. BN:Batch Normalization 这是大家最熟悉的了,结合上图 针对每一批, 正规化,减少前一层对后层的影响    针对一批中的 每一个 feature进行 normalization(也即每一个 feature采用不同的规范化操作),而 normal后是一个向量,向量的维度是 feature的个数,故而 又
相关文章
相关标签/搜索