NLP學習記錄(三)語言模型

語言模型 通俗的來說就是通過語料,計算某個句子出現的概率 N-Gram(有時也稱爲N元模型) 是自然語言處理中一個非常重要的概念,通常在NLP中,人們基於一定的語料庫,可以利用N-Gram來預計或者評估一個句子是否合理。另外一方面,N-Gram的另外一個作用是用來評估兩個字符串之間的差異程度。這是模糊匹配中常用的一種手段。 二元文法(一階馬爾科夫鏈) 以二元語法爲例,近似的認爲,一個詞出現的概率只
相關文章
相關標籤/搜索