ELMO/GPT/BERT/ERNIE

原文链接: http://chenhao.space/post/af0f9530.html Word Embedding 我们希望给不同意思的token也要给它们不同的embedding。 比如说这里的“bank”，过去我们的做法是，作为“银行”的意思，就给它一个embedding，作为“河岸”的意思，也给它一个embedding。但是人类的语言是很奇妙的，如 The hostpital has

>>阅读原文<<