深度学习中的梯度消失与梯度爆炸问题及其解决办法

目录 问题引出 梯度消失 梯度爆炸 如何解决 其他 问题引出 在前面，我们介绍了反向传播算法，其最终极的含义就是计算偏导数 ∂ C ∂ ω j k l \frac{\partial C}{\partial\omega_{jk}^{l}} ∂ωjkl​∂C​和 ∂ C ∂ b j l \frac{\partial C}{\partial b_{j}^{l}} ∂bjl​∂C​，其中 ∂ C ∂ ω

>>阅读原文<<