深度學習系列（2）：前向傳播和後向傳播算法

深度學習系列（2）：前向傳播和後向傳播算法 前言 講真，之前學吳恩達的機器學習課時，還手寫實現過後向傳播算法，但如今忘得也一乾二淨。總結兩個原因：1. 理解不夠透徹。2. 沒有從問題的本質抓住後向傳播的精髓。今天重溫後向傳播算法的推導，但重要的是比較前向傳播和後向傳播的優缺點，以及它們在神經網絡中起到了什麼不一般的作用，才讓我們如此着迷。 反向傳播的由來 反向傳播由Hinton在1986年發明，該

>>阅读原文<<