05 seq2seq和Attention

1、seq2seq seq2seq模型是以编码(Encode)、解码(Decode)为代表的架构方式模型。 编码(Encode)将输入序列转化成一个固定长度的向量(语义向量C) 解码(Encode)将固定长度的向量(语义向量C)转化成一个输出序列 编码方式:一般为多层LSTM 解码方式:一般为RNN、CNN等 问题: 由于seq2seq模型在编解码阶段,使用由一个不变的语义向量C来联系,编码器要将
相关文章
相关标签/搜索