【ACL2020】DeeBERT:衡量性能与效率的 BERT 推理方法

来自:AI自然语言处理与知识图谱(很好的公众号,推荐!) DeeBERT 作者信息 Elesdspline 目前从事NLP与知识图谱相关工作。 导语 近年来预训练在 NLP 领域的各个任务上都表现出来很好的效果,但是在推理速度方面却不如人意,所以有很多的研究针对如何加快推理而提出了各种各样的尝试。 本文针对加快 BERT 预训练模型的推理速度提出的相关方法,提出了一种简单而有效的方法 DeeBER
相关文章
相关标签/搜索