2.3.2 Batch Norm介紹

正則化網絡的激活函數 Batch歸一化會使你的參數搜索變得很容易,使神經網絡對超參數選擇變得更加穩定。超參數範圍會更龐大,工作效率也會更好。也會讓你訓練出更爲深層次的神經網絡。下面我們具體介紹一下Batch歸一化 如圖右側的圈圈所示,我們之前已經學過了通過歸一化手段如何將扁平的圈圈變成比較一般的圓形,但是這只是對邏輯迴歸而言的,對於神經網絡應該怎麼做呢? 我們在歸一化的例子中看到了,如果對x1,x
相關文章
相關標籤/搜索