一張圖理解訓練的BP反向傳播

經過同學許可，借用他的圖來講講深度學習的反向傳播，不涉及具體推導，宏觀把握原理。 深度學習訓練過程是訓練模型的過程，實質上不過是權值更新的過程（不知理解對不對），即圖上公式從W(old)到W(new)的過程，當然這裏是循環往復、迭代進行。 h(x)是舊的權值參數和特徵向量的內積，是實數。再經過激活函數例如sigmoid函數歸一化帶到網絡的預值f(x),最後測計算損失函數J，公式裏y是標籤值，你懂得

>>阅读原文<<