03.神經網絡與深度學習-第三週-淺層神經網絡

1. 神經網絡的層數 如圖的簡單神經網絡,隱藏層和輸出層稱爲第1層和第2層,可以將輸入層稱爲第0層; 一般來講習慣稱這個神經網絡是一個雙層神經網絡/單隱藏層神經網絡。                     <圖一>   2. 圖一中的神經網絡的向量化 3. 幾種激活函數     (1)sigmoid函數:有梯度消失問題;輸出不是以0爲中心,值區間在0-1之間,優化困難;收斂緩慢。因此,除非用在二
相關文章
相關標籤/搜索