《動手學深度學習PyTorch版》打卡_Task6，批量歸一化和殘差網絡

批量歸一化（BatchNormalization） 對輸入的標準化（淺層模型） 處理後的任意一個特徵在數據集中所有樣本上的均值爲0、標準差爲1。 標準化處理輸入數據使各個特徵的分佈相近 批量歸一化（深度模型） 利用小批量上的均值和標準差，不斷調整神經網絡中間輸出，從而使整個神經網絡在各層的中間輸出的數值更穩定。 神經網絡學習過程本質上就是爲了學習數據分佈，如果訓練數據與測試數據的分佈不同，網絡的泛

>>阅读原文<<