Resnet解析

在計算機視覺裏,特徵的「等級」隨增網絡深度的加深而變高,研究表明,網絡的深度是實現好的效果的重要因素。然而梯度彌散/爆炸成爲訓練深層次的網絡的障礙,導致無法收斂。 有一些方法可以彌補,如歸一初始化,各層輸入歸一化,使得可以收斂的網絡的深度提升爲原來的十倍。然而,雖然收斂了,但網絡卻開始退化了,即增加網絡層數卻導致更大的誤差, 如下圖。 原文鏈接:https://blog.csdn.net/mao_
相關文章
相關標籤/搜索