9.机器学习sklearn-----岭回归及其应用实例

1.基本概念 对于一般地线性回归问题,参数的求解采用的是最小二乘法,其目标函数如下: 参数w的求解,也可以使用如下矩阵方法进行:         对于矩阵X,若某些列线性相关性较大(即训练样本中某些属性线性相关),就会导致,就会导致XTX的值接近0,在计算(XTX)-1时就会出现不稳定性:  结论:传统的基于最小二乘的线性回归法缺乏稳定性。 岭回归(ridge regression)是一种专用于共
相关文章
相关标签/搜索