分词算法模型学习笔记(三)——CRF

分词算法模型学习笔记(三)——CRF Conditional Random Fields(CRF,条件随机场) 1.MEMM的存在问题 标注偏置 所谓的标注偏置就是更偏向于选择分支较少的路径,而不是全局概率更大但分支更多的真正正确路径。 如上图所示,虽然对于观测序列 x1,x2,x3 来说,隐藏状态序列 s0,s1,s2,s3 和 s0,s1,s4,s3 的出现频率会更高,但最后MEMM仍会选择分
相关文章
相关标签/搜索