1. 批量梯度下降法BGD 2. 隨機梯度下降法SGD 3. 小批量梯度下降法MBGD

排版也是醉了見原文：http://www.cnblogs.com/maybe2030/p/5089753.html 　　在應用機器學習算法時，我們通常採用梯度下降法來對採用的算法進行訓練。其實，常用的梯度下降法還具體包含有三種不同的形式，它們也各自有着不同的優缺點。 　　下面我們以線性迴歸算法來對三種梯度下降法進行比較。 1. 批量梯度下降法BGD  　　批量梯度下降法（Batch Gradien

>>阅读原文<<