學習:Attentionis all you need(2)

Attention是一種用於提升基於RNN(LSTM或GRU)的Encoder + Decoder模型的效果的的機制(Mechanism),一般稱爲Attention Mechanism。Attention Mechanism目前非常流行,廣泛應用於機器翻譯、語音識別、圖像標註(Image Caption)等很多領域,之所以它這麼受歡迎,是因爲Attention給模型賦予了區分辨別的能力,例如,在
相關文章
相關標籤/搜索