【深度學習筆記整理-6.4】GRU

GRU相比於LSTM運算量小了許多,其中LSTM是SimpleRNN四倍,GRU是三倍。GRU只有更新門和重置門,其中更新門類似將遺忘門和輸入門使用這一個門統一調控,重置門會將上一次的記憶重置後投入「信息門」使用。 更新門 使用更新門用以調控以往數據遺忘的比例和當下數據的輸入比例 重置門 重置門用來重置上一次的記憶,然後再投入到信息門中形成當下的信息。 整合 其中類似LSTM中的遺忘門,類似LST
相關文章
相關標籤/搜索