GBM

GBM 在決策樹章節中，學習了單棵決策樹算法。但是單棵決策樹模型效果往往不是很好，自然的就會想到集成多棵決策樹的來得到最終的結果。本文主要講述GBM算法，並以XGBoost爲例介紹Boost Trees，然後介紹XGBoost和LightGBM算法中的一些細節。GBM算法中，弱分類器使用的都是CART迴歸樹。 目標函數 每個算法訓練的時候都會有它的目標函數，算法訓練過程就是在訓練集上求目標函數的最

>>阅读原文<<