对于LSTM可能的一些误解以及其参数个数的计算

LSTM作为RNN的一种,在计算其参数的时候可能会有一些错误的理解。如果对于参数计算过程不理解,那么对网络可能也并不是很理解。如图       上图是一个简单RNN的示意图,为了方便理解,都会画成下面的形式 这样就会造成一些误解,将RNN理解为t个不同的模块,并且错误的认为每个模块有不同的参数。其实这里的RNN就只有一个模块。其余的是时间线上的展开。LSTM也类似 上图也是时间线上的展开,不是有三
相关文章
相关标签/搜索