機器學習之激活函數

激活函數 目錄 激活函數 一、爲什麼需要激活函數 二、常見的激活函數 1.Sigmoid 2、tanh 3、ReLU 4、Leaky ReLU 5、ELU 6、Maxout 三、如何選擇合適的激活函數 一、爲什麼需要激活函數 神經網絡單個神經元的基本結構由線性輸出 Z 和非線性輸出 A 兩部分組成。如下圖所示: 其中,f(x) 即爲線性輸出 Z,g(x) 即爲非線性輸出,g() 表示激活函數。通俗
相關文章
相關標籤/搜索