FastText模型

FastText简介 预备知识 N-gram模型 对句子或单词的所有长度为N的子句或子字符串进行操作,如2-gram中,对“girl”的字符串为“gi”,“ir”,"rl"进行操作,通常有操作如下: 比较两个单词的相似度,即按照公式根据子字符串的匹配情况计算出相似度,常用于模糊匹配、单词纠错等 评估句子是否合理,将句子定义为N阶马尔科夫链,即 P ( w i ∣ w 1 , w 2 , . . .
相关文章
相关标签/搜索