RNN遞歸神經網絡究竟是啥

不一樣的訓練batch之間有連續的先後關係，因此RNN須要輸入的是序列化的數據。對於mnist數據集，一個batch是28x28像素點x5，並不是序列數據，因而嘗試按行切分，使其成爲序列化， 因而，結合當前序列和以前序列的輸入，來進行手寫識別 全部的RNN都具備一種重複神經網絡模塊的鏈式形式。在標準RNN中，這個重複的結構模塊只有一個很是簡單的結構，例如一個tanh層 LSTM 一樣是這樣的結構，

>>阅读原文<<