BP（反向傳播）神經網絡

這篇文章主要討論神經網絡的反向傳播的細節，「誤差」是如何反向傳播的，我們又是如何利用梯度來優化參數的。 在學吳恩達機器學習視頻的神經網絡那節時，給出了許多公式，比如計算每層的誤差，每層參數的梯度，但並沒有給出推導過程，可能也是考慮入門級，大多人並不要知道其中含義就可以運用算法了。接下來我會給出詳細的推導過程，幫助大家理解。 注意接下來所講是未正則化的神經網絡。 1 計算公式 1.1 正向傳遞 假設

>>阅读原文<<