Xgboost算法

一、Boosting方法 1.  XGBoost（Extreme Gradient Boosting）     XGBoost是一种梯度提升算法、残差决策树，其基本思想为：一棵树一棵树逐渐地往模型里面加，每加一棵CRAT决策树时，要使得整体的效果（目标函数有所下降）有所提升。使用多棵决策树（多个单一的弱分类器）构成组合分类器，并且给每个叶子节点赋与一定的权值。     这里所讲的决策树是分类与回归

>>阅读原文<<