梯度下降法的推導（非常詳細、易懂的推導）

梯度下降算法的公式非常簡單，」沿着梯度的反方向（坡度最陡）「是我們日常經驗得到的，其本質的原因到底是什麼呢？爲什麼局部下降最快的方向就是梯度的負方向呢？也許很多朋友還不太清楚。沒關係，接下來我將以通俗的語言來詳細解釋梯度下降算法公式的數學推導過程。   下山問題 假設我們位於黃山的某個山腰處，山勢連綿不絕，不知道怎麼下山。於是決定走一步算一步，也就是每次沿着當前位置最陡峭最易下山的方向前進一小步，

>>阅读原文<<