机器学习入门--正规方程(含推导过程)

一、含义[1] 正规方程是通过求解代价函数的导数,导数为0来求得theta的值。 二、推导 上面第一个等式是线性回归的代价函数,写成向量化的形式即为第二个等式,向量的转置乘以该向量的含义是求向量中各元素的平方和,即XT * X = x12+x22+…+xn2 对代价函数求导[3]: 令导数为0时即为theta最小值 三、表现[1] 注:对于那些不可逆的矩阵(通常是因为特征之间不独立,如同时包含英尺
相关文章
相关标签/搜索