BDT提升樹模型

什麼是提升樹？ 提升樹是以分類樹或者回歸樹爲基分類器的提升算法，提升樹被認爲是統計學習中性能最好的方法之一。 提升樹模型是採用加法模型和前向分步算法，以決策樹爲基分類器，最後得到的模型。 加法模型 形如下圖的函數表達形式 其中， 在給定訓練數據及損失函數 L(y,f(x))的條件下，學習加法模型f(x)成爲損失函數極小化問題： 這個問題按照常規求導很難計算，採用前向分步算法可以較爲容易的解決此問題

>>阅读原文<<