神經網絡之 BP 算法

神經網絡的一種求解W的算法,分爲信號「正向傳播(FP)」求損失,「反向傳播(BP)」回傳誤差;根據誤差值修改每層的權重,繼續迭代 BP算法也叫做δ算法。以三層的感知器爲例(假定現在隱層和輸出層均存在相同類型的激活函數) 輸入層誤差 隱層誤差 輸入層誤差 誤差E有了,那麼爲了使誤差越來越小,可以採用隨機梯度下降的方式進行ω和υ的求解,即求得ω和υ使得誤差E最小 BP算法的例子 初始值:w(0.1,0
相關文章
相關標籤/搜索