梯度算法简析

本文涉及内容 什么是梯度 为什么需要梯度下降算法 如何理解梯度算法 数学推导 梯度算法的缺点 什么是梯度 简单来说,多元函数的导数(derivative)就是梯度(gradient),因为导数标识函数的变化趋势(递增或递减,震荡),分别对每个变量进行微分,然后用逗号隔开,梯度是用括号包括起来,说明梯度实质是一个向量,我们说的损失函数Loss Function的梯度为: 导数就是函数变化趋势-变化率
相关文章
相关标签/搜索