Xgboost算法

一、Boosting方法 1.  XGBoost（Extreme Gradient Boosting）     XGBoost是一種梯度提升算法、殘差決策樹，其基本思想爲：一棵樹一棵樹逐漸地往模型裏面加，每加一棵CRAT決策樹時，要使得整體的效果（目標函數有所下降）有所提升。使用多棵決策樹（多個單一的弱分類器）構成組合分類器，並且給每個葉子節點賦與一定的權值。     這裏所講的決策樹是分類與迴歸

>>阅读原文<<