邏輯斯諦迴歸與最大熵模型

1. 概述 Logistic迴歸是統計學中的經典分類方法，最大熵是概率模型學習的一個準則，將其推廣到分類問題得到最大熵模型，logistic迴歸模型與最大熵模型都是對數線性模型。 本文第一部分主要講什麼是logistic（邏輯斯諦）迴歸模型，以及模型的參數估計，使用的是極大對數似然估計以及梯度下降法，第二部分介紹什麼是最大熵模型，首先介紹最大熵原理， 然後根據最大熵原理推出最大熵模型，在求解最大熵

>>阅读原文<<