MobileNetv2

MobileNetV2 從MobileNetv1的結構來看，沒有使用現在比較火residual連接，而是採取了最常見的直筒型網路，那麼本文就是從激活函數ReLU層面分析了shorcut的必要性。 我們知道，當圖像在網絡中流動的時候，一般來說，我們的激活函數是ReLU，從ReLU的性質來看，如果輸出是小於0的，那麼就會喪失這個部分的信息，因爲ReLU在負半軸爲0，所以如果我們有一種結構，能夠把某些會

>>阅读原文<<