【Natural Language Processing】語言模型(Language Modeling)

一、語言模型簡介   語言模型用於對特定序列的一系列詞彙的出現概率進行計算。一個長度爲m的詞彙序列{ w1,w2,...,wn }的聯合概率被表示爲p( w1,w2,...,wn )。那麼根據鏈式規則可以得到： P(S)= p(w1,w2,...,wn)=∏nip(wi|w1,w2,...wi−1)   其中 p(wi|w1,w2,...wi−1) 的計算方法可以爲： p(wi|w1,w2,...

>>阅读原文<<