Non-local 理解

Non-local和谷歌的all is attention 如出一轍。 也可能是反着，all is attention和non-local如出一轍。 看的重點是THWxTHW這個矩陣，直接暴力所有可能性。 因此公式1+公式3+公式6就是Figure2。換句話說Figure2表示f()函數採取Embedded Gaussian且添加了residual connection的計算圖。數據流是這樣的：輸

>>阅读原文<<