自然語言處理中的語言模型預訓練方法--ELMO

自然語言處理中的語言模型預訓練方法--ELMO 1.引言 2. ELMO 3. ELMO 方法 4 ELMO使用 5. 總結 1.引言 在介紹論文之前,我將先簡單介紹一些相關背景知識。首先是語言模型(Language Model),語言模型簡單來說就是一串詞序列的概率分佈。具體來說,語言模型的作用是爲一個長度爲m的文本確定一個概率分佈P,表示這段文本存在的可能性。在實踐中,如果文本的長度較長,P(
相關文章
相關標籤/搜索