CRelu

一句話說明：作者通過對Alexnet淺層卷積核參數的觀察，發現了很多高度負相關的卷積核，於是猜測淺層卷積核是正負成對出現的，這就意味着通過這一對卷積核產生的feature map也是正負成對出現的，其實完全可以通過使用其中一個卷積核的featureMap取負得到對稱的featureMap，於是作者構造了一個CRelu即Concatenated Relu來完成這個功能。具體實現：將featureMa

>>阅读原文<<