反向傳播

作用 反向傳播的作用就是計算網絡的參數 w ∗ , b ∗ w^{*} ,b^{*} w∗,b∗反向傳播並不是和梯度下降不同的訓練方法,他與梯度下降相同,但是在計算梯度向量的時候更加高效。 鏈式法則 對整個網絡有,其損失函數爲: L ( θ ) = ∑ n = 1 N l n ( θ ) L(\theta ) = \sum_{n=1}^{N}l^{n}(\theta ) L(θ)=∑n=1N​ln
相關文章
相關標籤/搜索