梯度下降算法

 梯度下降法(gradient descent)是一個最優化算法,常用於機器學習和人工智能當中用來遞歸性地逼近最小偏差模型。          梯度下降的損失函數是通過迭代法一步步求解,得到最優解。 1.假設函數 2.代價函數的公式 3. 損失函數的可視化圖 4.批量梯度下降公式(BGD)     其中a爲學習率 如果a太大,那麼梯度下降算法可能匯越過最低點,甚至可能無法收斂 如果a太小,每次移動
相關文章
相關標籤/搜索