机器学习算法三：bagging及随机森林算法

在学习随机森林算法之前，首先需要对一些基础知识有一些了解。 1 信息、熵，信息增益及决策树 在学习任何跟决策树有关的算法时，都会接触到题目中的这几个概念，理解这几个概念有助于以后的学习，废话不多说。 1.1 信息 信息这个概念真的极其的抽象，看了很多博主的文章感觉还是理解不了，再看看香农的话，信息是用来消除随机不确定性的东西，更让人不知所云。 要理解信息的概念，就必须了解信息含量这个东西是如何去量

>>阅读原文<<