LSTM原理及其如何处理梯度弥散问题

RNN： 循环神经网络（下面简称RNNs）可以通过不停的将信息循环操作，保证信息持续存在 长依赖存在的问题： 当有用信息与需要该信息的位置距离较近时，RNNs能够学习利用以前的信息来对当前任务进行相应的操作 当有用信息与需要该信息的位置距离较远时，这样容易导致RNNs不能学习到有用的信息，最终推导的任务可能失败 LSTM： Long Short Term Memory networks，一种特殊的

>>阅读原文<<