[Keras实战教程]·使用Transfromer模型作文本分类（NLP分类最佳模型）

Transfromer理论部分 谷歌大脑在论文《Attention Is All You Need》中提出了一个彻底基于注意力机制的编解码器模型 Transformer ，它彻底抛弃了以前其它模型引入注意力机制后仍然保留的循环与卷积结构，而后在任务表现、并行能力和易于训练性方面都有大幅的提升。Transformer 今后也成为了机器翻译和其它许多文本理解任务中的重要基准模型。python 模型具体

>>阅读原文<<