PMI

Pointwise mutualinformation(PMI), 或point mutual information是衡量两个随机变量的相关度   X,Y 独立，则PMI(X,Y)= log1=0   X，Y相关，P(X)与P(X|Y)的大小不确定 完全相关时，为Log(1/P(x)) 或Log(1/P(Y)) >0 MI为PMI的期望。 例子：    MI （X,Y）=0.2141709  =

>>阅读原文<<