【吴恩达深度学习专栏】神经网络的编程基础(Basics of Neural Network programming)——梯度下降法(Gradient Descent)

2.4 梯度下降法(Gradient Descent) 梯度下降法可以做什么? 可以用如图那个小红点来初始化参数w和b,也可以采用随机初始化的方法,对于逻辑回归几乎所有的初始化方法都有效,因为函数是凸函数,无论在哪里初始化,应该达到同一点或大致相同的点。 我们以如图的小红点的坐标来初始化参数w和b。 2. 朝最陡的下坡方向走一步,不断地迭代 我们朝最陡的下坡方向走一步,如图,走到了如图中第二个小红
相关文章
相关标签/搜索
本站公众号
   欢迎关注本站公众号,获取更多信息