ML - 反向傳播

目錄 概述 正向傳播 誤差的反向傳播 權重更新 梯度消失與梯度爆炸 概述 反向傳播算法使用鏈式求導法則將輸出層的誤差反向傳回給網絡,使網絡中的權重有了較簡單的地圖計算方法。像TensorFlow,Pytorch有現成的反向傳播實現。 正向傳播 首先定義一個簡單的神經網絡,正向傳播的過程如下所示 以此類推,到達預測值y的位置如下。 誤差的反向傳播 接着計算預測值與真實值的誤差 接着可算出上一層的誤差
相關文章
相關標籤/搜索