深入理解批標準化(Batch Normalization)

文章目錄 0 前言 1 「Internal Covariate Shift」問題 1.1 什麼是「Internal Covariate Shift」 2 Batch Norm的本質思想 2.1 本質思想 2.2 將激活輸入調整爲N(0,1)有何用？ 2.3 存在的一個問題 3 Batch Norm的訓練過程 3.1 再Mini-batch SGD下做BN操作 4 Batch Norm的預測過程 4

>>阅读原文<<