RNN和LSTM原理推導

一、RNN原理 RNN實際上也就是神經網絡，它的基本組件（姑且這麼稱它吧）實際上也就是一個最簡單的神經網絡（一個input，一個hidden，一個output） 如圖所示 最大的區別就是，對於hiddenLayer來說，它的輸入不再單一的來自inputLayer，還來自於上一個時刻的hiddenLayer，也就是說，不同時刻的hiddenLayer之間也有權值連接。RNN基本結構如下圖所示 RNN

>>阅读原文<<