自然语言处理之Transformer

自然语言处理之Transformer   在上一篇文章,我介绍了attention,以及attention机制与seq2seq模型的简单结合。seq2seq模型适用于问答、阅读理解、机器翻译、语言生成等自然语言处理的任务,结合attention之后,在2017年提出self-attention,形成现在所说的transformer模型。transformer模型相比于seq2seq+attenti
相关文章
相关标签/搜索