10.2 常見的Normalization方法(BN、LN、IN、GN)

一、爲什麼要Normalization? 二、常見的Normalization方法(BN、LN、IN、GN)       這節課我們來學習常見的Normalization方法(BN、LN、IN、GN)。 一、爲什麼要Normalization? 其實這個問題在BN的論文中已經給了答案了,就是因爲在深度學習中,出現一個ICS的問題。數據尺度/分佈的異常,導致模型訓練困難。   二、常見的Normal
相關文章
相關標籤/搜索