DeepLearning.ai學習筆記(二)改善深層神經網絡:超參數調試、正則化以及優化--Week2優化算法...

1. Mini-batch梯度下降法 介紹 假設我們的數據量非常多,達到了500萬以上,那麼此時如果按照傳統的梯度下降算法,那麼訓練模型所花費的時間將非常巨大,所以我們對數據做如下處理: 如圖所示,我們以1000爲單位,將數據進行劃分,令\(x^{\{1\}}=\{x^{(1)},x^{(2)}……x^{(5000)}\}\), 一般地用\(x^{\{t\}},y^{\{t\}}\)來表示劃分後的
相關文章
相關標籤/搜索