機器學習——神經網絡累積BP算法

在上篇的博客介紹的「標準BP算法」每次僅針對一個訓練樣例更新鏈接權和閾值，也就是說，BP算法中的更新規則是基於單個的 推導而得，若是相似的推導出基於累積偏差最小化的更新規則，就獲得了累積偏差逆傳播算法。累積BP算法與標準BP算法都很經常使用（標準BP算法和累積BP算法的區別相似於隨機梯度降低(Stochastic gradient descent,簡稱 SGD)於標準梯度降低之間的區別）。通常來講

>>阅读原文<<