深度學習總結(十一)——early stopping

在訓練中,我們希望在中間箭頭的位置停止訓練。而Early stopping就可以實現該功能,這時獲得的模型泛化能力較強,還可以得到一箇中等大小的w的弗羅貝尼烏斯範數。其與L2正則化相似,選擇參數w範數較小的神經網絡。 可以用L2正則化代替early stopping。因爲只要訓練的時間足夠長,多試幾個lambda。總可以得到比較好的結果。 Early stopping: 優點:只運行一次梯度下降,
相關文章
相關標籤/搜索