1.2迴歸(regression)

1.2 迴歸(regression) 迴歸問題如何尋找使損失函數最小化的最優解,假設函數爲線性迴歸模型函數,整體思想如下: 針對最小二乘法來說,可以使用梯度下降法 算法實現: 而隨機梯度下降算法只不過是在梯度下降法(又稱批量梯度下降法)的基礎上做出了改進,選取的數據非全部數據,而是抽樣選擇部分數據對整體數據進行「以偏概全」 正則化: 解決這類問題,可以採用收縮發(shrinkage method)
相關文章
相關標籤/搜索