[改善深度神經網絡] Optimization algorithms習題解析

這是[改善深度神經網絡]課程第二週的習題，一共10道。 解答： [l]表示第l層，{l}表示第l個minibatch，(l)表示第l個樣本。 答案選項3 解答： 選項1是肯定的，一個mini-batch的數據小於總樣本，所以僅就一次迭代而言，mini-batch是快於整批迭代的。 一個epoch的mini-batch梯度遞減迭代無法完全向量化所有樣本，存在for循環，所以速度慢於整批迭代。 min

>>阅读原文<<