LSTM與AGC-LSTM兩者比較

LSTM網絡是RNN網絡的一個改進，解決了長期依賴問題，LSTM與標準循環神經網絡RNN相比，最主要的改進就是多出了3個門控制器：輸入門it，輸出門ot，遺忘門ft。3個門控制器的結構都相同，主要由sigmoid函數和點積操作構成，由於sigmoid函數的取值爲0~1，所以當sigmoid取值爲0時表示沒有信息可以通過，或者理解爲將所有的記憶全部遺忘。反之，取值爲1的時表示所有信息都能通過，完全保

>>阅读原文<<