BN和IN對比及其他Normalization

隨心筆記 圖中C代表通道，N一豎列代表一張圖片 這個圖是6個通道，也就是6個feature map BN：6張圖片的相同通道進行Normalization。 LN：一張圖片6個通道進行Normalization。 IN：一張圖片的一個通道進行Normalization。 GN：一張圖片的幾個通道進行Normalization。 BN適用於判別模型中，比如圖片分類模型。因爲BN注重對每個batch進

>>阅读原文<<