語言模型概率的平滑方法

1.常用Smoothing 方法 2. Add-one smoothing add-one smoothing 也叫拉普拉斯平滑 假設:不使用任何平滑方法,則語言模型的概率計算公式如下(MLE可以不用去管它) Add-one smoothing之後(主要爲了防止 分母或分子 爲0 的情況 C: 表示出現次數 V: 表示詞典庫的大小 分母爲什麼要加 V,而不是 2V, 3V,4V…呢? 先看一個例子
相關文章
相關標籤/搜索