梯度提升樹

GBDT(Gradient boosting decision tree)是一種迭代的決策樹算法,又叫MART,他通過構造多顆決策樹,並把多顆決策樹的結果累加起來作爲最後的預測輸出。該算法將決策樹與集成做了很好的結合 生成梯度提升樹的案例: 具體步驟: (1)根據原始數據生成迴歸樹 (2)然後計算殘差,用殘差替代y,生成新的數據。 殘差=真實值-預測值 (3)用新生成的數據生成第2顆生成樹 (4)
相關文章
相關標籤/搜索