【機器學習】【高等數學】梯度與梯度下降法

目錄 1.導數 2.梯度 3.梯度下降法 4.梯度下降存在的問題 機器學習中,在求解損失函數的最小值時,需要用到求導數的各種技巧。   1.導數 導數的幾何意義:導數又叫微分,是圖像的斜率。 多元函數的偏導數 偏導數的幾何意義   2.梯度 梯度的定義 來自百度:(梯度的本意是一個向量(矢量),表示某一函數在該點處的方向導數沿着該方向取得最大值,即函數在該點處沿着該方向(此梯度的方向)變化最快,變
相關文章
相關標籤/搜索