[笔记]牛顿方法·指数族·GLMs

牛顿方法(Newton’s method) 牛顿方法是另一种最大化 l(θ) 的算法。 首先找到一个实数域上的方程 f ， f(θ)=0 ，θ是实数。 从起始点 θ0 开始，找到 f(θ0) 处的切线，与坐标轴相交于 θ1 ，由此不断迭代。两点之间的距离记为Δ 。 f′(θ0)=f(θ0)Δ —-> Δ=f(θ0)f′(θ0) 所以牛顿方法执行更新规则： θ:=θ−f(θ)f′(θ) 如果想要找到

>>阅读原文<<