语言模型中常见的平滑处理技术

1 为什么需要平滑处理技术？ 在使用语言模型直接计算某个句子出现的概率时，可能会由于某个单词或单词对出现的概率为0而导致整个句子出现的概率为0。 例如下面这个场景： 在上面的场景中，由于部分单词对出现的概率为0，导致最终两句话出现的概率均为0。但实际上，s1=“今天没有训练营”比s2=“今天训练营没有”更符合语法习惯，我们也更希望计算出来的P(s1)大于P(s2)。 2 常见的平滑处理技术 为了解

>>阅读原文<<