NLP基礎之語言模型及其評估方法

 1. Noisy Channel Model   2. 語言模型  即判斷一句話是不是人話。是計算上文noisy channel model 模型中的P(text)。方法是用markov假設。即一個詞出現概率只與它前邊的一個詞有關，與再往前的詞無關（bigram） 2.1 Markov Assumption(馬爾科夫假設) 與 Unigram（詞相互獨立）、Bigram（每個詞只與前1個詞相關聯

>>阅读原文<<