吳恩達深度學習之卷積神經網絡(二)深度卷積網絡:示例探究

大綱: 1、幾個經典網絡 lenet-5: alexnet: vgg-16: 2、殘差網絡 殘差網絡作用: 沒有殘差網絡的一般神經網絡:隨着深度的加深, 目標函數會先下降後增加。 有殘差網絡的神經網絡:隨着深度的加深,目標函數一直下降,有助於解決梯度消失和梯度爆炸的問題。 殘差網絡,如果對w[l+2]和b[l+2]進行權重衰減,那麼a[l+2]將等於a[l],這樣的話增加了殘差塊,使得殘差塊的左邊
相關文章
相關標籤/搜索