爲什麼正則化可以防止過擬合?

以下理解來源於吳恩達老師深度學習視頻 爲什麼正則化有利於預防過擬合呢?爲什麼它可以減少方差問題?我們通過兩個例子來直觀體會一下。 左圖是高偏差,右圖是高方差,中間是Just Right,這幾張圖我們在前面課程中看到過。 直觀上理解就是如果正則化參數設置得足夠大,權重矩陣被設置爲接近於0的值,直觀理解就是把多隱藏單元的權重設爲0,於是基本上消除了這些隱藏單元的許多影響。如果是這種情況,這個被大大簡化
相關文章
相關標籤/搜索