深度學習中的前向傳播與反向傳播

前向傳播 對於一個還沒有訓練好的神經網絡而言，各個神經元之間的參數都是隨機值，即初始化時賦的值，前向傳播過程是神經網絡的輸入輸出過程，即網絡是如何根據X的值得到輸出的Y值的。 設激活函數爲f，權重矩陣爲W，偏置項爲b，輸入爲A，輸出爲Y，則Y = f(AW+b)，計算Y這個過程就是前向傳播的過程。 注意：權重矩陣W一開始是個隨機值 在樣本中我們的數據是(x,label)，而y是我們經過神經網絡計算

>>阅读原文<<