淺談神經網絡中常用的激活函數

激活函數總結 什麼是激活函數？ 激活函數對於神經網絡模型去學習、理解非常複雜和非線性的函數來說具有十分重要的作用。首先，數據的分佈絕大多數是非線性的，而一般神經網絡的計算是線性的，引入激活函數，是在神經網絡中引入非線性，強化網絡的學習能力。沒有激活函數的每層都相當於矩陣相乘。就算你疊加了若干層之後，無非還是個矩陣相乘罷了。 激活函數 1、Sigmoid函數 Sigmoid函數又叫Logistic函

>>阅读原文<<