模型的方差与偏差

泛化误差可以分为三个部分，偏差(bias), 方差(variance) 和噪声(noise)。其中可控的是偏差(bias), 方差(variance)。 偏差： Bias，指的是模型预测值偏离真实值的程度； 方差： Variance，值模型预测值的离散程度，比如两条几乎相同的样本，但是预测值可能差很多； Bias 和Variance 的关系如下图所示，模型可以预测的不准但是方差很小，比如第三个圆。

>>阅读原文<<