統計語言模型與NLP算法設計

什麼是語言模型呢？ 簡單的說，統計語言模型是用來計算句子中某種語言模式出現概率的統計模型。一般自然語言的統計單位是句子，所以也可以看做句子的概率模型。假設W=(w1,w2,....,wn)爲一個句子，這個句子有n個詞，也就是n個詞彙按順序構成的字符序列，這裏表示爲W1n,利用貝葉斯公式進行鏈式分解，w1,w1,....wn的聯合概率爲：                          我們需要設

>>阅读原文<<