RNN中的門控循環單元GRU

1. RNN隱層單元結構可視化 下面是一個基本的RNN隱層單元結構:web 其中,a是上一個時刻的激活函數輸出值,x是當前時刻的輸入,y是當前時刻的輸出。網絡 要理解這個單元結構,須要注意2點:ide a與x結合,經過激活函數的做用後,有兩個分支,一個分支做爲下一個時刻的輸入a 另外一個分支經過softmax做用後,做爲當前時刻的輸出y 2. GRU單元中的符號 GRU(Gated Recurre
相關文章
相關標籤/搜索