BERT大火却不懂Transformer？读这一篇就够了

大数据文摘与百度NLP联合出品 编译：张驰、毅航、Conrad、龙心尘 编者按：前一段时间谷歌推出的BERT模型在11项NLP任务中夺得STOA结果，引爆了整个NLP界。而BERT取得成功的一个关键因素是Transformer的强大作用。谷歌的Transformer模型最早是用于机器翻译任务，当时达到了STOA效果。Transformer改进了RNN最被人诟病的训练慢的缺点，利用self-atte

>>阅读原文<<