L1与L2正则化

强烈推荐看此博客：很好很全面的博客 一、 奥卡姆剃刀(Occam’s razor)原理：          在所有可能选择的模型中，我们应选择能够很好的解释数据，并且十分简单的模型。从贝叶斯的角度来看，正则项对应于模型的先验概率。可以假设复杂模型有较小的先验概率，简单模型有较大的先验概率。    二、正则化项      2.1、什么是正则化？       正则化是结构风险最小化策略的实现，在经验风

>>阅读原文<<