神經架構搜索(NAS)綜述

一、定義 神經架構搜索(Neural Architecture Search,簡稱 NAS)的核心思想是使用搜索算法來發現用於解決我們的問題所需要的神經網絡結構。 有些論文的結果很難重現原因之一就是獲得最優超參值往往需要花很大的力氣。超參數的自動搜索優化是一個古老的話題了。 對於深度學習來說,超參數(Hyperparameter)主要有三類: 優化參數(如learning rate,batch s
相關文章
相關標籤/搜索