多層感知機

三.多層感知機: 1.1 形成多層神經網絡 1.2 表達公式 1.3 激活函數 上述問題的根源在於全連接層只是對數據做仿射變換(affine transformation),而多個仿射變換的疊加仍然是一個仿射變換。解決問題的一個方法是引入非線性變換,例如對隱藏變量使用按元素運算的非線性函數進行變換,然後再作爲下一個全連接層的輸入。這個非線性函數被稱爲激活函數(activation function
相關文章
相關標籤/搜索