Xavier

正确的权重初始化有利于网络收敛,权重初始化的目的是防止激活值饱导致梯度不能传播。两种权重初始化方式:Xavier和hekaiming。本文介绍Xavier,论文名:Understanding the difficulty of training deep feedforward neural 。 1 Xavier概述 Xavier初始化是2010年由Xavier提出来的。这篇文章假设条件比较多,模
相关文章
相关标签/搜索