BP 神經網絡算法

sigmoid函數: x的值可能爲[−∞,+∞],爲了方便處理，需要將其壓縮到一個合理的範圍，還需 這樣的激勵函數，能夠將剛纔的區間壓縮到[0,1]。 sigmoid 是使用範圍最廣的一類激活函數，具有指數函數形狀，它在物理意義上最爲接近生物神經元。此外，(0, 1) 的輸出還可以被表示作概率，或用於輸入的歸一化，代表性的如Sigmoid交叉熵損失函數。 然而，sigmoid也有其自身的缺陷，最明

>>阅读原文<<