机器学习-->贝叶斯网络

本篇博文主要总结贝叶斯网络相关知识。 复习之前的知识点 相对熵 相对熵，又称互熵，交叉熵，鉴别信息， Kullback 熵， Kullback−Leible 散度等 。 设 p(x)、q(x) 是 X 中取值的两个概率分布，则 p 对 q 的相对熵是 : D(p||q)=∑xp(x)logp(x)q(x)=Ep(x)logp(x)q(x) 相对熵可以度量两个随机变量的“距离”。 一般的， D(p|

>>阅读原文<<