批處理梯度降低BGD與隨機梯度降低SGD

梯度降低（GD）是最小化風險函數、損失函數的一種經常使用方法，隨機梯度降低和批量梯度降低是兩種迭代求解思路，下面從公式和實現的角度對二者進行分析，若有哪一個方面寫的不對，但願網友糾正。函數 下面的h(x)是要擬合的函數，J(theta)損失函數，theta是參數，要迭代求解的值，theta求解出來了那最終要擬合的函數h(theta)就出來了。其中m是訓練集的記錄條數，j是參數的個數。優化 一、批量

>>阅读原文<<