神經網絡反向傳播的矩陣複合求導計算

以前一直以爲矩陣的複合求導和可微函數的鏈式求導是一樣的,但是在推導神經網絡梯度公式的時候往往會出現一些符號次序不對的問題,我這裏借用吳恩達編程作業中給出的淺層神經網絡的案例來計算反向傳播的梯度。關於矩陣複合求導法則可以參考:矩陣的複合求導
相關文章
相關標籤/搜索