Gradient descent 梯度下降

李宏毅老师机器学习课程笔记——Gradient descent 梯度下降 在上一篇笔记regression回归中,提到了回归过程中参数求解利用了梯度下降法,本篇笔记将对梯度下降法展开深入讨论。 梯度下降是机器学习过程中常见的优化算法,用于求解机器学习算法的模型参数。 一、理论 机器学习算法求解最优参数可以表示为: 其中,L(θ)为loss function损失函数,θ为parameters参数。
相关文章
相关标签/搜索