與 SENet 互補提升,華爲諾亞提出自注意力新機制:Weight Excitation|ECCV2020

注意力機制、動態卷積最近幾年被研究得非常透了,不過前述方法大多聚焦於特徵圖層面,而該文則是從權值角度出發提出了一種非常有意思的機制。該文所提方法僅作用於訓練階段,不會對推理造成任何的計算量消耗、網絡結構改變,同時可取得媲美SE的性能提升,更重要的是它可以與SE相互促進。 論文: http://www.ecva.net/papers/eccv_2020/papers_ECCV/papers/1237
相關文章
相關標籤/搜索