1.2回归(regression)

1.2 回归(regression) 回归问题如何寻找使损失函数最小化的最优解,假设函数为线性回归模型函数,整体思想如下: 针对最小二乘法来说,可以使用梯度下降法 算法实现: 而随机梯度下降算法只不过是在梯度下降法(又称批量梯度下降法)的基础上做出了改进,选取的数据非全部数据,而是抽样选择部分数据对整体数据进行“以偏概全” 正则化: 解决这类问题,可以采用收缩发(shrinkage method)
相关文章
相关标签/搜索