神經網絡訓練細節之batch normalization

在對神經網絡進行訓練的時候，經常涉及到的一個概念就是batch normalization，那麼究竟什麼是batch normalization，以及爲什麼在訓練的時候要加入batch normalization呢？以下就是我的一些學習心得。 1、提出batch normalization的原因       （1） 我們在對某個神經網絡訓練完成之後，需要測試該網絡，那麼如果我們的訓練集數據與測試集

>>阅读原文<<