最小均方偏差的推导+最小二乘法、梯度降低法、牛顿法、高斯牛顿法

最小二乘法（又称最小平方法）是一种数学优化技术。它经过最小化偏差的平方和寻找数据的最佳函数匹配。利用最小二乘法能够简便地求得未知的数据，并使得这些求得的数据与实际数据之间偏差的平方和为最小。最小二乘法还可用于曲线拟合。其余一些优化问题也可经过最小化能量或最大化熵用最小二乘法来表达。 基本公式 考虑超定方程组（超定指方程个数大于未知量个数）： 其中m表明有m个等式，n表明有n个未知数β，m>n ；将

>>阅读原文<<