從導數到梯度下降算法

梯度下降是機器學習中尋找極值點的基礎算法,它的思想也很簡單。想象你站在山巔,山脈的起伏就帶代表着,想要到達山谷的辦法就是尋找下山最陡峭的地方,沿着這條路向下走,直到無法再向下。 在介紹梯度下降算法前,我們先直到什麼是梯度,而梯度我們又應該先知道什麼是導數 1.導數 這是導數的標準定義,導數表示變量在指定位置的變化程度,變化快慢 導數是高中就學習過的知識,也是微積分中重要的微分。導數的大小代表了函數
相關文章
相關標籤/搜索