機器學習算法Part4 線性模型

Part4 線性模型 1. 線性迴歸 線性迴歸採用最小二乘法作爲代價函數,需要符合最小二乘法使用的基本假設,違背基本假設時,普通最小二乘法估計量不再是最小線性無偏估計量,但是還是無偏的 正規方程法中如果 X T X X^TX XTX不可逆,兩種解決方案:刪除數據中多餘的特徵(即特徵之間存在相關性);刪除部分特徵數據使特徵數小於樣本數 2.邏輯迴歸 當邏輯迴歸仍採用線性迴歸的代價函數時,即仍用MSE
相關文章
相關標籤/搜索