卷積神經網絡CNN筆記:激活函數

激活函數    使用一個神經網絡時,需要決定使用哪種激活函數用隱藏層上,哪種用在輸出節點上。    在神經網路的前向傳播中,這兩步會使用到sigmoid函數。sigmoid函數在這裏被稱爲激活函數。 sigmoid函數   之前在線性迴歸中,我們用過這個函數,使我們的輸出值平滑地處於0~1之間。    說明:除非輸出層是一個二分類問題否則基本不會用它。 雙曲正切函數   tanh函數是sigmoi
相關文章
相關標籤/搜索