通俗理解决策树中的熵&条件熵&信息增益

参考通俗理解决策树算法中的信息增益web 说到决策树就要知道以下概念：算法 熵：表示一个随机变量的复杂性或者不肯定性。 假如双十一我要剁手买一件衣服，可是我一直犹豫着要不要买，我决定买这件事的不肯定性（熵）为2.6。svg 条件熵：表示在直到某一条件后，某一随机变量的复杂性或不肯定性。 我在看了这件衣服的评价后，我决定买衣服这件事的不肯定性是1.2。 我在线下实体店试穿衣服后，我决定买衣服这件事的

>>阅读原文<<