過擬合的代價函數以及正則化

   當函數出現 過擬合的問題,可以考慮 減少輸入的特徵,但通常並不希望採用這種做法,另一種常用的解決過擬合問題的方法就是 正則化。我們通過修改過擬合的函數的代價函數來實現正則化,修改後的正則化線性迴歸的代價函數如下:    後面添加的一個約束項,對特徵的權重進行約束。而參數lambda 則控制兩個目標之間的平衡,一個目標函數是更好地擬合訓練集,另外一個目標就是防止出現過擬合的現象。很明顯如果正則
相關文章
相關標籤/搜索