反向傳播(CS231n版)

核心概念: 計算圖的概念 反向傳播利用了鏈式求導但是本質不完全是鏈式法則 理解概要 與其說反向傳播算法的本質是鏈式求導法則,到不如說它的本質是分治的思想在鏈式求導法則中的應用。因爲當一個函數很複雜的時候,即使是我們會鏈式求導法則,求這個函數對某一個變量的偏導數(的解析解)依然是一個非常困難的事情。而反向傳播則是把一個大問題拆成一個一個各自獨立互不影響的小的問題,分別求出這些小的問題的解,再把這個解
相關文章
相關標籤/搜索