基于梯度的优化方法

1.优化指的是改变x以最小化或最大化的某个函数f(x)的任务 我们通常以最小化f(x)指代大多数最优化问题。最大化可经由最小化算法 -f(x) 来实现。 我们希望最小化或最大化的函数叫目标函数，当我们对其进行最小化的时候，也叫作代价函数或损失函数或误差函数。 我们经常使用一个上标*表示最小化或最大化函数的x值: , 我们通过改变x的值来最小化或者最大化函数f(x)的值。 2. 微积分概念如何于优化

>>阅读原文<<