機器學習——神經網絡、深度學習 知識點總結 及 面試題彙總

一、反向傳播思想： 計算出輸出與標籤間的損失函數值，而後計算其相對於每一個神經元的梯度，根據梯度方向更新權值。 （1）將訓練集數據輸入到ANN的輸入層，通過隱藏層，最後達到輸出層並輸出結果，這是ANN的前向傳播過程； （2）因爲ANN的輸出結果與實際結果有偏差，則計算估計值與實際值之間的偏差，並將該偏差從輸出層向隱藏層反向傳播，直至傳播到輸入層； （3）在反向傳播的過程當中，根據偏差調整各類參數的

>>阅读原文<<