正则化和贝叶斯先验

参考自here 事实上如果从贝叶斯的观点,所有的正则化都是来自于对参数分布的先验。现在来看一下为什么Laplace先验会导出L1正则化,Gauss(高斯)先验会导出L2正则化。 高斯分布公式 f ( x ) = 1 2 π δ e x p ( − ( x − μ ) 2 2 δ 2 ) f(x) = \frac{1}{\sqrt{2π}\delta}exp(-\frac{(x-\mu)^2}{2\
相关文章
相关标签/搜索