【机器学习】最小二乘法&梯度下降

最小二乘法 所谓的最小二乘法是一种数学优化技术，它通过最小化误差的平方和找到一组数据的最佳函数匹配。最小二乘法通常用于函数拟合以及求函数极值，很多其他的优化问题也可通过最小化能量或最大化熵用最小二乘形式表达。 例如已知坐标轴上有一些点，他们主要围绕着一条直线分布，显然并不都在线上，也就不能用一个一次线性表达式来表示，这就需要用到最小二乘法的思想，然后就用线性拟合来求，我们只要做到5个点到这条直线的

>>阅读原文<<