NeuralNetwork and DeepLearing----Shallow neural networks

摘自黃海廣等人筆記 1.激活函數(Activation funcions) 使用一個神經網絡時,需要確定哪種激活函數用在隱藏層上,哪種用在輸出節點上。 sigmoid函數:a = σ(z) = 11+e−z 1 1 + e − z 更通常的情況下,使用不同的函數g( z[1] z [ 1 ] ),g可以是除了sigmoid函數以外的非線性函數。tanh函數(雙曲線正切函數)是總體上都優於sigmo
相關文章
相關標籤/搜索