循環神經網絡

卷積神經網絡，應用於圖像處理，控制參數的量，減少過擬合 RNN更適用於自然語言處理，語音識別等序列任務，行爲序列、時間序列 RNN基於神經網絡的變化 傳統神經網絡輸入的特徵和輸出都是獨立的 St是t時刻的記憶 St=f(UXt + WS(t-1)) f可以是tanh等 Ot是t時刻的輸出 Ot=softmax(V(St)) 不同類型RNN 雙向RNN、深層雙向RNN Lstm 相比較RNN改變了記

>>阅读原文<<