GRU门控循环神经网络

门控循环网络 深度学习的概念源于对人工神经网络的研究,门控循环单元GRU神经网络是深度学习的一种。长短期记忆网络(LSTM)在RNN的基础上,通过引入门控操作解决了其梯度爆炸的问题,而GRU网络实际上是LSTM网络一种较为成功的变体【1,2,3】。 对比一般的神经网络,GRU网络收敛速度快且不容易发生梯度消失的情况,主要原因是该网络复杂的门控单元(细胞状态)通过偏置和相关参数来实时和灵活的调整激活
相关文章
相关标签/搜索