GAN網絡

Self-Attention Generative Adversarial Networks 主要貢獻： 在GAN網絡中加入了自注意力機制，可以從所有位置的細節線索來生成高分辨率細節特徵，判別器可以檢查圖像的遠端部分中的高度詳細特徵是否彼此一致。 添加的自注意力機制網絡結構如上圖。 同時，作者還用了以下兩個技巧： Spectral normalization: 頻譜歸一化可以防止參數梯度的上升，避

>>阅读原文<<