《TensorFlow 2.0深度學習算法實戰教材》重點內容摘錄（六、反向傳播算法）

反向傳播算法和梯度下降算法是神經網絡的核心算法。 導數與梯度 導數本身是標量，沒有方向，但是導數表徵了函數值在某個方向Δ𝒙的變化率。在這些任意Δ𝒙方向中，沿着座標軸的幾個方向比較特殊，此時的導數也叫做偏導數(Partial Derivative)。對於一元函數，導數記爲𝑑𝑦/𝑑𝑥；對於多元函數的偏導數，記爲𝜕𝑦/𝜕𝑥1,𝜕𝑦/𝜕𝑥2, …等。偏導數是導數的特例，也沒有方

>>阅读原文<<