前向傳播和反向傳播(以簡單神經網絡爲例)

在神經網絡模型中包括前向傳播和反向傳播 那麼究竟什麼是前向傳播,什麼是反向傳播呢 前向傳播:說的通俗一點就是從輸入到得到損失值的過程,當然不僅僅是這麼簡單,中間還經過了一些處理,那麼這些處理包括什麼呢: 1:從輸入層開始:假設是一個形狀是(2,3) 2:經過權重參數(w(3,取決你的中間隱層1的形狀)偏置參數(b)的處理後再經過一個激活函數處理得到中間隱層1, 3:同理再經過第二個參數處理和激活函
相關文章
相關標籤/搜索