集成學習——從決策樹到XGBoost（1）決策樹算法

現在最火的兩種模型，就是基於樹的模型和深度學習神經網絡模型了，並且，這兩種個模型在很多地方，都有異曲同工的相似之處。 XGB和LGB以及由其組成的stacking方法，是kaggle數據挖掘比賽中的大殺器，金牌選手的必選模型。 1.決策樹 首先，我們需要介紹一下決策樹。 決策樹的結構如下圖所示 圖來自：http://www.javashuo.com/article/p-kfaatezp-mr.ht

>>阅读原文<<