三张简图搞懂GBDT

首先假设你有初步的了解什么是决策树，CART树，集成，Adaboost, boosting的一些概念。算法 下面咱们先了解什么是提高树函数   都知道，在每一个基分类器（CART树）生成的过程，有一个最小化损失函数的步骤，那么对于回归树来讲，当咱们使用的损失函数是平方损失偏差的话，来看看是什么状况：blog （注意图片上的标注红字）图片 看了红字，我以为你们应该能理解有些书上说的残差，拟合什么的了

>>阅读原文<<