机器学习--决策树(熵、信息增益（ID3）、C4.五、多方式源码实战)

谈决策树以前先作一些预备性知识：php 1.什么是信息？如何衡量信息的多少？怎么衡量？html      信息：从广义上讲，是事物运动时发出的信号所带来的消息，是事物存在方式和运动规律的一种表现形式。不一样的事物具备不一样的存在方式和运动规律，从而构成了各类事物的不一样特征。信息广泛存在于天然界、社会界以及人的思惟之中，是客观事物本质特征千差万别的反应。信息分为两大类：天然信息与社会信息。node

>>阅读原文<<