NLP——ELMO模型

NLP——ELMO模型 1、模型预训练和模型微调 作为近些年来深度学习的两个应用思路，预训练和模型微调为后面的任务提供了良好的基础。所以，我们先来介绍一下预训练和模型微调的概念。 1.1 预训练 我们从一个例子开始，假设我们接到的是一个文本分类的任务，需要对数据集A中的文本进行文本分类，我们的首先要做的是对于A中的文本进行分词，生成词向量。然后采用某一个深度学习的模型。训练分类的参数。现在，我们将

>>阅读原文<<