Batch GD/Mini-batch GD/SGD/Mini-batch SGD/Online GD

用下面的損失函數來做爲例子:函數 參數更新公式爲:spa 1. Batch GDblog 對於 Batch GD, m 是整個 batch 大小, 它用整個集合的數據來更新參數。im 2. Mini-batch GD數據 整個 batch 被分爲幾個小的 mini-batches, m 是 mini-batch 的大小。img 3. SGD/Mini-batch SGD集合 m=1,在全部數據上迭
相關文章
相關標籤/搜索