神经网络最优化方法比较(代码理解)

为高效找到使损失函数的值最小的参数，关于最优化（optimization）提了很多方法。 http://ruder.io/optimizing-gradient-descent/  本网页介绍的原理可以参考。下面这段代码取自一本教材，比较经典。 # coding: utf-8 import numpy as np import matplotlib.pyplot as plt from colle

>>阅读原文<<