CS231N-Lecture6 Training Neural Network part-2

一、概述 這一集講了一些列不同的梯度下降算法，做了一些比較。 之後，講到了Dropout機制，隨機關閉一些neuron的訓練方式可以使整個模型更加有效。 然後講到了一點關於Model Ensemble的技巧。 最後，做了一個Convnet的引入，介紹了Convnet的歷史起源，以及後人的一些成就。 二、梯度下降算法 SGD SGD(Stochastic Gradient Descent)就是之前一

>>阅读原文<<