深度学习课堂笔记 5.14

深度学习课堂笔记 5.14 深度学习存在的问题 （1）参数过多，训练难度大 （2）非凸优化问题，局部最优影响迭代 （3）梯度消失or爆炸 （4）参数解释困难 （5）过拟合or欠拟合 梯度消失or爆炸产生的原因： （1）BP法先天问题 （2）初始权重带来的影响 （3）激活函数选择不当 （4）梯度流动带来的影响：网络结构本身的问题，如CNN （5）损失值过大带来的影响：数据集的问题，如标注不准等 一：

>>阅读原文<<