論文分享 -- > NLP -- > Neural machine Translation of Rare Words with Subword Units

本次總結的是一篇16年的關於NLP中分詞操做的論文,論文連接Subword,參考的實現代碼subword-nmt,許多論文方法(例如BERT等)都將該方法應用到分詞處理上,相對於word-level和character-level,該方法取得了不錯的效果。git 動機和創新點 機器翻譯中,一般使用固定大小的詞表,而在實際翻譯場景中,應當是open-vocabulary。這就使得翻譯數據集中的稀有詞
相關文章
相關標籤/搜索