过拟合、正则化、L1与L2正则

正则化(regularization)，是指在线性代数理论中，不适定问题通常是由一组线性代数方程定义的，而且这组方程组通常来源于有着很大的条件数的不适定反问题。大条件数意味着舍入误差或其它误差会严重地影响问题的结果。 通俗定义：就是给平面上不可约代数曲线以某种形式的全纯参数表示。 主要解决的问题 1、正则化就是对最小化经验误差函数加上约束（比如在分类损失函数中，交叉熵后面的那一项就是约束项，也就是

>>阅读原文<<