BP算法與公式推導

BP算法與公式推導          BP(backpropgationalgorithm )：後向傳導算法，顧名思義就是從神經網絡的輸出(頂層)到輸入(底層)進行求解。那麼求解什麼呢，求解的就是神經網絡中的參數的導數，即參數梯度方向，從而就可以使用梯度下降等求解無約束問題(cost function的最值)的方法求得最終的參數。神經網絡前向傳播的過程比較簡單，這裏不做講解(如果不瞭解，可以參看文

>>阅读原文<<