广告行业中那些趣事系列19：工业场景超实用的线上推理FastBERT

摘要：本篇主要分享基于BERT实现线上推理服务的FastBERT模型。首先讲了下为啥要用FastBERT模型。因为NLP数据集中不同样本的识别难度不同，厚重的模型会存在过度计算的问题，而轻量模型则很难识别复杂样本，FastBERT模型提出了一种根据样本复杂度动态调整使用Transformer层数的样本自适应机制(sample-wise adaptive mechanism)，从而可以又快又好的提供

>>阅读原文<<