【Tensorflow2.0】十二、經常使用優化算法optimizers_for_deep_learning

文章目錄 一、梯度降低法變種 1.1 批量梯度降低法 batch gradient descent 1.2 隨機梯度降低法 stochastic gradient descent 1.3 小批量梯度降低法 mini-batch gradient descent 2 、難點 三、經常使用梯度優化算法 3.1 Momentum 3.2 Nesterov 加速梯度降低法 3.3 Adagard 3.4

>>阅读原文<<