LSTM網絡細節

爲了解決RNN的長時依賴的問題。RNN無法保存較長的時間的信息,因爲梯度消失問題。 LSTM引入了門控單元的機制,也就是添加了C這條通路,使得可以較長長時間保存信息。 LSTM單元(unit)一般由一個細胞(cell),一個輸入門 (inputgate),一個輸出門(outputgate)和一個遺忘門 (forgetgate)組成. •細胞能夠記住任意時間間隔上的值,三個門能夠控制進出細胞的 信息
相關文章
相關標籤/搜索