XGBoost複習

·XGBoost本質上還是GBDT,但是把速度和效率做到了極致; ·不同於傳統的GBDT方式,只利用了一階的導數信息,XGBoost對loss func做了二階的泰勒展開,並在目標函數之外加入了正則項整體求最優解,用以權衡目標函數的下降和模型的複雜程度,避免過擬合。
相關文章
相關標籤/搜索