Machine Learning:Parameter Learning——Gradient Descent

Gradient Descent 当成本函数位于图中凹坑的最底部时,即当其值最小时,我们就成功了。 我们这样做的方法是采用成本函数的导数,切线的斜率是该点的导数,它将为我们提供一个方向,我们沿下降最陡的方向逐步降低成本函数,每步的大小由参数α(称为学习率)确定。 算法 repeat until convergence: where j=0,1 represents the feature inde
相关文章
相关标签/搜索