LSTM (Long Short-Term Memory)

LSTM (Long Short-Term Memory) LSTM的产生 LSTM产生的原因: 第一代RNN在处理长序列时,该记住的信息没记住,可能不该记住的信息却记得很牢。 而LSTM通过引入巧妙的可控自循环,能产生让梯度能够得以长时间可持续流动的路径。 标准的RNN结构如下,这个重复的结构模块只有一个非常简单的结构,例如一个tanh层。 LSTM 同样是这样的结构,但是重复的模块拥有一个不同
相关文章
相关标签/搜索