【論文筆記】Character-Aware Neural Language Models

一、概要   該文章發於AAAI 2016,作者提出了僅建立在字符輸入,預測在詞水平上進行的一個神經語言模型(NLM)。當輸入一個LSTM循環神經網絡語言模型(RNN-LM)時,該模型在字符上啓用了一個卷積神經網絡(CNN),讓該CNN的輸出通過一個 Highway Network,使得效果得到進一步提升。該模型非常適用於形態豐富的語言上,因爲其可以獲取到豐富的語義和拼寫信息。 二、模型方法 2.
相關文章
相關標籤/搜索