GoogleNet學習筆記

改善深度神經網絡的方法:1.增加深度(增加層數)2.增加寬度(增加每層神經單元數) 帶來問題: 1.網絡龐大,數據集小時,易導致過擬合(解決過擬合辦法:L1,L2正則化;Dropout;數據增強) 2.參數過多,訓練時間長 3.網絡深度過大,易導致梯度消失問題(解決梯度消失問題:運用殘差連接) 解決辦法:運用稀疏連接結構替代全連接結構(包括Conv層)。CPU及GPU適於計算密集矩陣,計算非一致稀
相關文章
相關標籤/搜索