深度学习之梯度下降法

梯度下降 简而言之，对于深度学习的模型，比如普通的神经网络，我们有一个输入值 x x x，一个矩阵 W W W 和一个输出预测值 Y ^ = W ⋅ x \hat{Y}=W·x Y^=W⋅x， 但是往往除此之外还会有一个真实的 y y y 值。拿一种较为常见的损失函数公式举例： C o s t = ( p r e d i c t e d − r e a l ) 2 = ( W ⋅ x − y )

>>阅读原文<<