理解注意力機制的好文二

注意力模型最近幾年在深度學習各個領域被廣泛使用，無論是圖像處理、語音識別還是自然語言處理的各種不同類型的任務中，都很容易遇到注意力模型的身影。所以，瞭解注意力機制的工作原理對於關注深度學習技術發展的技術人員來說有很大的必要。 人類的視覺注意力     從注意力模型的命名方式看，很明顯其借鑑了人類的注意力機制，因此，我們首先簡單介紹人類視覺的選擇性注意力機制。 圖1 人類的視覺注意力       視

>>阅读原文<<