gru

gru 在 GRU 中,以下图所示,只有两个门:重置门(reset gate)和更新门(update gate) RNN的一个特色是全部的隐层共享参数(U,V,W),整个网络只用这一套参数。gru也是如此 “ * ”表明点乘 其中, rt表示重置门,zt表示更新门。 1重置门rt决定是否将以前的状态忘记。(做用至关于合并了 LSTM 中的遗忘门和传入门) 2将先前隐藏状态ht-1和遗忘门输出的向量
相关文章
相关标签/搜索