ngram 求句子概率(平滑)

ngram平滑主要解決在當前gram下,詞表中沒有出現該詞的情況(不能使用想當然的詞頻0).   Sen=一個 傻子 走 在 大陸 上 p(sen)=p(一個|start)p(傻子|一個)p(走|一個,傻子)*p(在|傻子,走)…   求p(傻子|一個)的方法爲在詞表中找 【一個 傻子】 的概率(經過了log計算)但是….沒有找到 於是,使用 這個回退係數bow(-0.4344)來通過p(傻子)*
相關文章
相關標籤/搜索