pandlepandle深度學習模型參數的優化

learn_rate 學習率,通常位於優化步驟中 表示每次結果誤差的反饋係數,越大結果反饋誤差對模型影響越大,一般取3、1、0.5、0.1、0.01、0.0001··· 對於深度學習來說,每 t 輪學習,學習率減半。對於監督學習來說,初始設置一個較大的學習率,然後隨着迭代次數的增加,減小學習率。 大多數的網絡的學習率的初始值設置爲0.01和0.001爲宜 感知器個數(隱藏層數) 層數越多,時間越長
相關文章
相關標籤/搜索