淺談BN

爲什麼要用到BN? 解決Internal Covariate Shift 什麼是Internal Covariate Shift? Batch Normalization的原論文作者給了Internal Covariate Shift一個較規範的定義:在深層網絡訓練的過程中,由於網絡中參數變化而引起內部結點數據分佈發生變化的這一過程被稱作Internal Covariate Shift。 我們定義
相關文章
相關標籤/搜索