注意力機制--NLP

        Attention 機制最早是在視覺圖像領域提出來的，應該是在九幾年思想就提出來了，但是真正火起來應該算是 2014 年 Google Mind 團隊的這篇論文 Recurrent Models of Visual Attention，他們在 RNN 模型上使用了 Attention機制來進行圖像分類。         隨後，Bahdanau 等人在論文 Neural Machin

>>阅读原文<<