ELMo模型解讀

          在反覆的看了ELMo源碼和參考網上各路大神的經驗之後,終於對ELMo的架構有了比較清楚的認識。總結一下自己對ELMo的理解,其實還有很多細節沒有搞清楚。 一.模型架構 下面是我畫的一個架構簡圖,對於ELMo不管你輸入的是詞還是字符,它都會以字符的單位進行後續的字符卷積,對與詞的索引是根據詞典序號索引的,而字符論文說英文的字符加上一些特殊的標記字符總共不會超過262個,所以對字符
相關文章
相關標籤/搜索