神經網絡正向和反向傳播公式推導

表示方法:第l-1層的第k個神經元到第l層的第j個神經元的線性係數定義爲   正向: 假設第l-1層有m個神經元 代數表示: 矩陣表示:   反向: 以均方誤差爲例: 一:J到最後一層輸出層(第L層)的z: 先對aL, 再是a對z: 二:J到任意一層(l層)的z: 1.藉助上式和鏈式法則,可以求J對任意一層(l層)的z: 2.或者是:根據J對z(l+1)求z(l)的: 無論哪種,關鍵是求: 1.矩
相關文章
相關標籤/搜索