深度学习(Deep Learning)读书思考八:循环神经网络三(RNN应用)

概述 经过前两小节的介绍,能够清楚的了解RNN模型的网络结构以及LSTM。本小节主要介绍RNN其余变形以及应用,包括web 1.GRU单元 2.序列到序列(Seq2Seq)模型 3.注意力(Attention)模型 4.RNN在NLP中的应用 5.总结网络 GRU单元 GRU经过引入重置门和遗忘门来解决长期依赖问题,相对于LSTM有更少参数而且在某些问题上,效果好于LSTM。 架构 重置门 rt=
相关文章
相关标签/搜索