自然語言期末複習筆記—最大熵模型

在這篇博客中，我們針對最大熵模型MaxEnt,最大熵馬爾科夫模型MEMM,條件隨機場CRF做一下介紹。 首先我們來看看MaxEnt，MaxEnt模型中最本質得思想就是我們對未知的事情不要做任何假設。也就是對未知的事情應該等概率對待，這種條件下信息熵往往是最大的。 最大熵原理指出，當我們需要對一個隨機事件的概率分佈進行預測時，我們的預測應當滿足全部已知的條件，而對未知的情況不要做任何主觀假設。在這種

>>阅读原文<<