ngram 求句子概率(平滑)

ngram平滑主要解决在当前gram下，词表中没有出现该词的情况(不能使用想当然的词频0).   Sen=一个 傻子 走 在 大陆 上 p(sen)=p(一个|start)p(傻子|一个)p(走|一个，傻子)*p(在|傻子，走）…   求p(傻子|一个)的方法为在词表中找 【一个 傻子】 的概率（经过了log计算）但是….没有找到 于是，使用 这个回退系数bow（-0.4344）来通过p(傻子)*

>>阅读原文<<