集成學習(4)--XGBoost

XGBoost是GBDT的一種高效實現,但是裏面也加入了很多獨有的思路和方法,值得單獨講一講。因此討論的時候,我會重點分析和GBDT不同的地方。 本文主要參考了XGBoost的論文和陳天奇的PPT。 從GBDT到XGBoost 作爲GBDT的高效實現,XGBoost是一個上限特別高的算法,因此在算法競賽中比較受歡迎。簡單來說,對比原算法GBDT,XGBoost主要從下面三個方面做了優化: 一是算法
相關文章
相關標籤/搜索