梯度下降法——得到的结果可能是局部最优值，如果凸函数则可保证梯度下降得到的是全局最优值...

摘自：http://www.wengweitao.com/ti-du-xia-jiang-fa.html 梯度下降法（Gradient Descent）是一种常见的最优化算法，用于求解函数的最大值或者最小值。 梯度下降 在高数中，我们求解一个函数的最小值时，最常用的方法就是求出它的导数为0的那个点，进而判断这个点是否能够取最小值。但是，在实际很多情况，我们很难求解出使函数的导数为0的方程，这个时候

>>阅读原文<<