機器學習——梯度下降法(Gradient Descent)初識

梯度下降法(Gradient Descent) 不是一個機器學習算法 是一種基於搜索的最優化方法 作用:最小化一個損失函數 梯度上升法:最大化一個效用函數 無論是梯度下降法還是梯度上升法都是對目標函數進行優化操作。 梯度下降法可以類比下山的過程,山勢連綿不絕,不知道怎麼下山。於是每次沿着當前位置最陡峭最易下山的方向前進一小步,然後繼續沿下一個位置最陡方向前進一小步,一直走到覺得已經到了山腳。這就是
相關文章
相關標籤/搜索