LSTM原理複習整理

LSTM網絡 long short term memory，即LSTM，是爲了解決長期以來問題而專門設計出來的，所有的RNN都具有一種重複神經網絡模塊的鏈式形式。在標準RNN中，這個重複的結構模塊只有一個非常簡單的結構，例如一個tanh層。 LSTM 同樣是這樣的結構，但是重複的模塊擁有一個不同的結構。不同於單一神經網絡層，這裏是有四個，以一種非常特殊的方式進行交互。 圖中使用的各種元素的圖標：

>>阅读原文<<