神經網絡訓練中Epoch、batch_size、iterator的關係

爲了理解這些術語的不同,需要先了解些機器學習術語,如:梯度下降 梯度下降 這是一個在機器學習中用於尋找最佳結果(曲線的最小值)的迭代優化算法。 梯度的含義是斜率或者斜坡的傾斜度。 下降的含義是代價函數的下降。 算法是迭代的,意思是需要多次使用算法獲取結果,以得到最優化結果。梯度下降的迭代性質能使欠擬合的圖示演化以獲得對數據的最佳擬合。 梯度下降中有一個稱爲學習率的參量。如上圖左所示,剛開始學習率更
相關文章
相關標籤/搜索