臺大李宏毅Machine Learning 2017Fall學習筆記 (8)Backpropagation

臺大李宏毅Machine Learning 2017Fall學習筆記 (8)Backpropagation 當網絡結構很複雜時,會有大量的參數。 ∇L(θ) 是百萬維的向量。如何高效地計算百萬維的參數,使用反向傳播算法來計算。BP並非是一個和GD不同的訓練方法,BP就是GD,只是是一種比較有效率的計算方法。 數學知識鋪墊:微積分中的鏈式法則,很簡單。 還是以上節中手寫數字識別爲例。 xn 是一張輸
相關文章
相關標籤/搜索