LSTM與GRU

不少博客已經詳細講述了lstm和gru的結構及公式，這裏就不一一介紹了，參考下面連接，講的挺詳細函數 http://www.javashuo.com/article/p-uosezjcr-bs.html.net 這篇文章主要講本身對lstm與gru的區別及聯繫的理解。設計 在傳統RNN中，因爲反向傳播過程當中出現激活函數的累乘，容易形成梯度消失和梯度爆炸，這就形成在較長的time-steps下，後

>>阅读原文<<