语言模型评价指标Perplexity

语言模型(Language Model,LM),给出一句话的前k个词,但愿它能够预测第k+1个词是什么,即给出一个第k+1个词可能出现的几率的分布p(xk+1|x1,x2,...,xk)。3d 在报告里听到用PPL衡量语言模型收敛状况,因而从公式角度来理解一下该指标的意义。 orm Perplexity定义 PPL是用在天然语言处理领域(NLP)中,衡量语言模型好坏的指标。它主要是根据每一个词来估
相关文章
相关标签/搜索