集成學習:隨機森林/GBDT/XGBoost (學習筆記一)

知識點: 隨機森林 提升算法 GBDT(迭代決策樹) Adaboost XGBoost Stacking 集成學習(Ensemble Learning) 集成學習的思想就是將若干個學習器(分類器&迴歸器)組合之後產生一個新學習器.弱分類器(weak learner)指那些分類準確率只稍微好於隨機猜測的分類器(error<0.5); 集成算法的成功在於保證弱分類器的多樣性(Diversity).而且

>>阅读原文<<