解剖caffe:Forward 和 Backward

Forward和Backward是一個網絡的基本計算。 先考慮一個logistic regression分類器。 前向通路使用輸入計算輸出,用於推理。計算模型表示的函數,前向通路從bottom到top。 數據通過內積層傳遞到, 然通過softmax函數傳遞到以及softmax損失給 反向通路在損失函數處開始,並計算關於輸出的梯度。關於模型其餘部分的梯度通過鏈式規則逐層計算。帶有參數的層,比如INN
相關文章
相關標籤/搜索