QANET: COMBINING LOCAL CONVOLUTION WITH GLOBAL SELF-ATTENTION FOR READING COMPREHENSION

論文地址:https://openreview.net/pdf?id=B14TlG-RW 摘要         目前的端到端機器閱讀和問答模型主要基於包含注意力的循環神經網絡,拋開優點。這些模型的主要缺點:在訓練和推理方面效率較低。 因此我們提出了一種名爲QANet的問答架構,這個網絡不需要使用遞歸網絡,它的編碼器完全由卷積和self-attention組成,卷積網絡處理局部信息,self-att
相關文章
相關標籤/搜索