Synchronous Bidirectional Inference for Neural Sequence Generation

abstract: 目前seq2seq任務大多是從左到右一個詞一個詞生成的 神經網絡的方法,比如LSTM或者self-attention,可以充分利用歷史信息,但是不能利用未來信息(future information),從而導致結果的不平衡(左邊由於右邊) 本文提出一種同步雙向推理模型: 提出平衡搜索策略,利用同步雙向解碼 同時交互使用left2right和right2left的雙向解碼,以便同
相關文章
相關標籤/搜索