機器學習總結(二)——邏輯斯諦迴歸和最大熵模型

一、邏輯斯諦迴歸 1. 邏輯斯蒂迴歸的優缺點 優點：計算代價不高，易於理解和實現，且若採用隨機梯度上升法可以在線學習； 速度快，存儲資源低。 缺點：可能容易欠擬合，分類精度不高，這個可能是因爲我們無法找到足夠的特徵。只能處理兩類分類問題，且必須是線性可分的；（在此基礎上衍生出來的softmax可以用於多分類） 2. 與其它的分類算法比較 直接用線性迴歸做分類因爲考慮到了所有樣本點到分類決策面的距離

>>阅读原文<<