自然语言处理(4)

1. TF-IDF原理 1.1 什么是TF-IDF? TF-IDF是一种统计方法,用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中出现的次数成正比增加,但同时会随着它在语料库中出现的频率成反比下降。 TF-IDF加权的各种形式常被搜寻引擎应用,作为文件与用户查询之间相关程度的度量或评级。 TF-IDF有两层意思,一层是"词频"(Term Frequen
相关文章
相关标签/搜索