3.1 深度学习优化算法

3.1 深度学习优化算法 学习目标 目标 知道局部最优问题、鞍点与海森矩阵 说明批梯度下降算法的优化 说明三种类型的优化算法 知道学习率退火策略 知道参数初始化策略与输入归一化策略 应用 应用完成梯度下降优化算法的实现 深度学习难以在大数据领域发挥最大效果的一个原因是，在巨大的数据集基础上进行训练速度很慢。而优化算法能够帮助我们快速训练模型，提高计算效率。接下来我么就去看有哪些方法能够解决我们刚才

>>阅读原文<<