GRU

結構 GRU由Cho、van Merrienboer、 Bahdanau和Bengio在2014年提出。 GRU結構如下： 重置門和更新門 GRU包含兩個門，一個重置門 Rt R t 和一個更新門 Zt Z t 。 定義如下： 這兩個門的結果經過了一個sigmoid函數，值域爲 [0,1] [ 0 , 1 ] . 候選隱含狀態 候選隱含狀態使用了重置門來控制包含過去時刻信息的上一個隱含狀態的流入。

>>阅读原文<<