softmax，softmax loss和cross entropy的講解

轉載自: https://blog.csdn.net/u014380165/article/details/77284921 這一篇主要介紹全連接層和損失層的內容，算是網絡裏面比較基礎的一塊內容。先理清下從全連接層到損失層之間的計算。來看下面這張圖，來自參考資料1（自己實在懶得畫圖了）。 這張圖的等號左邊部分就是全連接層做的事，W是全連接層的參數，我們也稱爲權值，X是全連接層的輸入，也就是特徵。從

>>阅读原文<<