优化算法——拟牛顿法之L-BFGS算法

一、BFGS算法     在“优化算法——拟牛顿法之BFGS算法”中，我们得到了BFGS算法的校正公式： 利用Sherman-Morrison公式可对上式进行变换，得到 令，则得到： 二、BGFS算法存在的问题     在BFGS算法中，每次都要存储近似Hesse矩阵，在高维数据时，存储浪费很多的存储空间，而在实际的运算过程中，我们需要的是搜索方向，因此出现了L-BFGS算法，是对BFGS算法的一

>>阅读原文<<