圖像分類經典論文閱讀筆記4:ResNet-Deep residual learning for image recognition

1.概述 隨着神經網絡的深度增加,網絡會學習更高等級的特徵,從而提高性能。但是,網絡深度的增加,會出現梯度消失和梯度爆炸問題(從一開始阻礙收斂),可以通過標準初始化(normalized initialization)和中間標準化層(BN)解決。繼續不斷加深神經網絡深度時,會出現退化(Degradation)問題,即準確率會先上升然後達到飽和,再持續增加深度會導致準確率下降。退化問題說明深度網絡不
相關文章
相關標籤/搜索