深度學習-初始化權值

深度學習–初始化權值 多層網絡初始化w的時候,通常不初始化爲0,會初始化爲一個非0的很小的參數。 w初始值不宜太大,若w初始過大,z值過大,dz值太小,學習會很慢(對於激活函數爲sigmoid或tanh函數而言)web
相關文章
相關標籤/搜索