使用conlleval.pl对CRF测试结果进行评价的方法

基于CRF作命名实体识别系列

用CRF作命名实体识别(一)
用CRF作命名实体识别(二)
用CRF作命名实体识别(三)html

评测

用CRF作完命名实体识别咱们测试以后获得的结果就是预测的标签,并不能直接获得F1值等评测结果,以前我是用sklearn写了一个计算F1值的代码,如今发现了一个神器,能够直接获得F1值。我也是直接下载的,很差直接发给你们,就在这里给个连接好了conlleval+perl环境+conlleval使用说明 。里面有很详细的介绍,你们照作便可。测试

百闻不如一见

processed 552387 tokens with 22928 phrases; found: 22325 phrases; correct: 21183.
accuracy:  98.83%; precision:  94.88%; recall:  92.39%; FB1:  93.62
              LOC: precision:  92.48%; recall:  90.39%; FB1:  91.43  6653
              ORG: precision:  98.20%; recall:  98.41%; FB1:  98.30  3395
              PER: precision:  94.55%; recall:  89.13%; FB1:  91.76  7104
             TIME: precision:  96.25%; recall:  95.81%; FB1:  96.03  5173

注意

另外提醒你们一点,标签的格式也要一致,按照说明去操做,也就没有什么问题了.net

相关文章
相关标签/搜索