Xavier

正確的權重初始化有利於網絡收斂,權重初始化的目的是防止激活值飽導致梯度不能傳播。兩種權重初始化方式:Xavier和hekaiming。本文介紹Xavier,論文名:Understanding the difficulty of training deep feedforward neural 。 1 Xavier概述 Xavier初始化是2010年由Xavier提出來的。這篇文章假設條件比較多,模
相關文章
相關標籤/搜索