機器學習：各類優化器Optimizer的總結與比較

優化器總結 機器學習中，有不少優化方法來試圖尋找模型的最優解。好比神經網絡中能夠採起最基本的梯度降低法。web 梯度降低法(Gradient Descent) 梯度降低法是最基本的一類優化器，目前主要分爲三種梯度降低法：標準梯度降低法(GD, Gradient Descent)，隨機梯度降低法(SGD, Stochastic Gradient Descent)及批量梯度降低法(BGD, Batch

>>阅读原文<<