AI科學家帶你從零開始學習:循環神經網絡 !

前面的教程裏我們使用的網絡都屬於前饋神經網絡。爲什麼叫前饋是整個網絡是一條鏈(回想下gluon.nn.Sequential),每一層的結果都是反饋給下一層。這一節我們介紹循環神經網絡,這裏每一層不僅輸出給下一層,同時還輸出一個隱藏狀態,給當前層在處理下一個樣本時使用。下圖展示這兩種網絡的區別。 循環神經網絡的這種結構使得它適合處理前後有依賴關係的樣本。我們拿語言模型舉個例子來解釋這個是怎麼工作的。
相關文章
相關標籤/搜索