算法強化 —— 提升樹算法(二)

梯度提升樹 梯度提升樹,是利用損失函數的負梯度在當前模型的值作爲殘差的一個近似值,進行擬合迴歸樹,這樣只要可以求梯度的函數,我們都可以進行求解。 爲了簡便去掉求和符號和下標,改用向量化表示,則損失函數爲: loss = L ( y , f m ( x ) ) = L ( y − f m − 1 ( x ) − h m ( x ; a m ) ) \text {loss}=L\left(y_, f_
相關文章
相關標籤/搜索