diversity beam search

  Seq2Seq中常用到的優化方法就是Beam Search,但是Beam Search的一個缺點就是生成的N個回答往往差異性很小,無法體現語言的多樣性(比如文本摘要、機器翻譯的生成文本,往往有不止一種表述方式)。最近看論文的時候發現Google提出的改進Beam Search方法,下面來稍微總結下。 論文地址:https://arxiv.org/pdf/1610.02424.pdf 具體如下:
相關文章
相關標籤/搜索