詳解語言模型NGram及困惑度Perplexity

進入正文 一、什麼是語言模型 什麼是語言模型 相關背景與認知 1.1       對於自然語言相關的問題,比如機器翻譯,最重要的問題就是文本的序列時候不是符合我們人類的使用習慣,語言模型就是用於評估文本序列符合人類語言使用習慣程度的模型。       語言模型所面臨的最大難題。我們爲了讓機器能夠理解或者是產生符合人類語言的語言序列,一種方式是制定一個規範的人類語言範式(規範),比如陳述句需要需要有
相關文章
相關標籤/搜索