DAY2:神經網絡基礎和深度學習筆記整理

一、neural network representation 二、activation function and their derivative   Question:爲什麼要使用非線性的激活函數？ 如果使用線性激活函數，那麼神經網絡不管有多少隱藏層都只是把輸入做線性組合然後再輸出（兩個線性函數的組合 仍然是線性函數）【詳見上圖】。線性激活函數在迴歸問題中有時候也是可行的，比如房價的預測問題，

>>阅读原文<<