机器学习---算法基础（5.3）XGBoost

XGBoost XGBoost相对于GBDT 参考文献： XGBoost超详细推导 机器学习算法中 GBDT 和 XGBOOST 的区别有哪些？ XGBoost与GBDT树的原理相似，都是使用加法模型，通过梯度上升的方式求出，其主要的不同点在 XGBoost使用的是泰勒展式的二阶导数，而GBDT采用的是一阶导，XGBoost的拟合效果更好 XGBoost中带有正则项（L2正则项），减少了模型的过拟

>>阅读原文<<