天然語言處理——語言模型(三)

引言 本文主要探討了如何用困惑度來評估語言模型的好壞,以及統計語言模型中的幾種平滑方法。html 評估語言模型 評估語言模型就是判斷語言模型的好壞。web 通常使用**困惑度(perplexity)**來評估,它的公式爲: P e r p l e x i t y = 2 − ( x ) Perplexity = 2^{-(x)} Perplexity=2−(x) 其中 x x x爲平均對數似然。咱
相關文章
相關標籤/搜索