语言模型概率的平滑方法

1.常用Smoothing 方法 2. Add-one smoothing add-one smoothing 也叫拉普拉斯平滑 假设:不使用任何平滑方法,则语言模型的概率计算公式如下(MLE可以不用去管它) Add-one smoothing之后(主要为了防止 分母或分子 为0 的情况 C: 表示出现次数 V: 表示词典库的大小 分母为什么要加 V,而不是 2V, 3V,4V…呢? 先看一个例子
相关文章
相关标签/搜索