机器学习深入与强化--数学基础(4)

一般优化问题：无约束和有约束 无约束： 综上，无约束忧化直接分析法的局限： 局限一：导数有可能求不出来 局限二：即便求出导数，导数=0的解可能就不出来，比如导数本身就是高维函数 局限三：即便是解出来了，对于有些高度非线性矩阵，解也有可能是一个集合的形式，找一个最小值的解也不容易 主要就看搜索方向dk的选择： 上式先忽略二次项，只看前两项，第二项和再做向量的内积，内积的定义为a和b的模的乘积再乘以c

>>阅读原文<<