XGBoost详解

文章目录 背景 目标函数 最优切分点算法 Shrinkage(收缩过程) 缺失值处理 优缺点 背景 在看Xgboost之前，先看看笔者写的AdaBoost 和GBDT。 AdaBoost 关注的是哪些错误分类的样本，每次加大误分类样本的权重，训练新的分类器。 GBDT关注的是分类器的残差，每一次训练分类器都是为了不断减小这个残差。 Xgboost可以说是GBDT算法在工程上的一种实现。如下图所示：

>>阅读原文<<