(DeepLab-resnet) + 深度學習部份層 小筆記。

首先說一下resnet: 1.解決卷積網絡不斷加深時出現的退化問題:即即使在訓練集上都出現準確率在隨着網絡不斷加深而降低的現象。 2.resnet實現: 一、減少傳統卷積或者全連接的信息丟失問題,(因爲會有x直接連接輸至輸出那裏)。 二、每一層都用了BN! 1. BN要和Scale結合使用: 1. bn是實現權值參數的歸一化:x_norm = (x - u) / std  2. scale是實現把
相關文章
相關標籤/搜索