強分類器-----提升樹的原理和推導

參考李航老師的統計學習方法一書 提 升方法實際上採用加法模型和前向分佈算法,其中以決策樹爲基函數的提升方法稱爲提升樹。 對於分類問題:決策樹是二叉分類樹,其中損失函數爲指數損失函數 對於迴歸問題:決策數是二叉迴歸樹,其中損失函數爲誤差平方和 一般決策問題:一般損失函數,爲梯度下降算法 1. 提升樹原理 對於二分類問題只需要將AdaBoost中的基本分類器限定爲二分類樹即可,即是AdaBoost的特
相關文章
相關標籤/搜索