神經網絡簡介

神經網絡是在感知器的基礎上，將激活函數由階躍函數替換成非線性函數。 神經網絡添加多個隱層就是多層神經網絡 常見非線性激活函數: sigmoid 在神經網絡早期經常使用的函數 tanh ReLU 在零點處不可導 非線性激活函數的好處： 在感知器裏面，a,b,c在二維平面代表的是三條直線（輸入數據時二維的情況下） 如果在將階躍函數替換成非線性激活函數，a,b,c三條曲線將解空間進一步分割，可以訓練出更

>>阅读原文<<