RNN,LSTM,GRU自己笔记

时间 2021-01-12

原文原文链接

RNN的前向传播：这里是一张清理后的神经网络示意图，和我之前提及的一样，一般开始先输入，它是一个零向量。接着就是前向传播过程，先计算激活值，然后再计算。我将用这样的符号约定来表示这些矩阵下标，举个例子，第二个下标意味着要乘以某个类型的量，然后第一个下标表示它是用来计算某个类型的变量。同样的，可以看出这里的乘上了某个类型的量，用来计算出某个类型的量。循环神经网络用的激活函数经常是tanh，不过

>>阅读原文<<

1. RNN-LSTM-GRU学习笔记
2. RNN、LSTM、GRU
3. RNN&LSTM&GRU
4. RNN - LSTM - GRU
5. RNN、GRU、LSTM
6. LSTM、GRU、 BRNN、Hierarchical RNN
7. RNN,LSTM,GRU学习
8. 详解RNN、LSTM、GRU
9. attention RNN LSTM Gru gate
10. Lession5(RNN)--week1--LSTM,GRU
更多相关文章...
• 在自己的 PC 上运行 ASP - ASP 教程
• ASP.NET Razor - 标记 - ASP.NET 教程
• Tomcat学习笔记（史上最全tomcat学习笔记）
• RxJava操作符（十）自定义操作符