梯度下降法的三種形式BGD、SGD以及MBGD

閱讀目錄 1. 批量梯度下降法BGD 2. 隨機梯度下降法SGD 3. 小批量梯度下降法MBGD 4. 總結   在應用機器學習算法時,我們通常採用梯度下降法來對採用的算法進行訓練。其實,常用的梯度下降法還具體包含有三種不同的形式,它們也各自有着不同的優缺點。   下面我們以線性迴歸算法來對三種梯度下降法進行比較。   一般線性迴歸函數的假設函數爲: hθ=∑nj=0θjxjhθ=∑j=0nθjx
相關文章
相關標籤/搜索