深度学习经常使用优化器介绍

    深度学习的优化算法从SGD-->SGDM-->NAG-->AdaGrad-->AdaDelta-->Adam-->Nadam这样的发展历程，理论知识参考这里，下面咱们依次介绍TensorFlow中这些优化器的实现类，官方文档。python 一、tf.train.Optimizer     优化器（optimizers）类的基类。这个类定义了在训练模型的时候添加一个操做的API。你基本上不会

>>阅读原文<<