面試筆試整理3:深度學習機器學習面試問題準備(必會)

第一部分:深度學習 一、神經網絡基礎問題 (1)Backpropagation(要能推倒)   後向傳播是在求解損失函數L對參數w求導時候用到的方法,目的是經過鏈式法則對參數進行一層一層的求導。這裏重點強調:要將參數進行隨機初始化而不是所有置0,不然全部隱層的數值都會與輸入相關,這稱爲對稱失效。 大體過程是:web 首先前向傳導計算出全部節點的激活值和輸出值, 算法 計算總體損失函數: 網絡 而後
相關文章
相關標籤/搜索