LSTM与GRU

不少博客已经详细讲述了lstm和gru的结构及公式，这里就不一一介绍了，参考下面连接，讲的挺详细函数 http://www.javashuo.com/article/p-uosezjcr-bs.html.net 这篇文章主要讲本身对lstm与gru的区别及联系的理解。设计 在传统RNN中，因为反向传播过程当中出现激活函数的累乘，容易形成梯度消失和梯度爆炸，这就形成在较长的time-steps下，后

>>阅读原文<<