机器学习|最小二乘法的概率解释

在拟合数据时，为什么选择最小二乘来作为误差函数呢？ 虽然不明白为什么，但是一直觉得很有道理的样子。最小二乘或平方差作为误差函数，是基于一些概率假设推导出了这个公式。这里有一些概率上的解释。让我们慢慢来看。 1.允许误差存在 首先要说明的，所有的预测值都不可能完美地与真实值契合，所以误差必然存在，而我们的目的就是如何让误差尽可能地小。这样就可以假设有一组θ，使真实的数据存在以下关系式，y(i)表示真

>>阅读原文<<