Alexnet

The Architecture ReLU Nonlinearity 非飽和非線性，然而，在這個數據集上，主要關注的是防止過分擬合，因此他們觀察到的效果不一樣於咱們在使用ReLUs時報告的訓練集的加速能力。web Training on Multiple GPUs 對於2-GPU（AlexNet裏的group參數），其實AlexNet能夠直接用單GPU來實現，你們以爲AlexNet是2GPU的緣故

>>阅读原文<<