Alexnet

The Architecture ReLU Nonlinearity 非饱和非线性，然而，在这个数据集上，主要关注的是防止过分拟合，因此他们观察到的效果不一样于咱们在使用ReLUs时报告的训练集的加速能力。web Training on Multiple GPUs 对于2-GPU（AlexNet里的group参数），其实AlexNet能够直接用单GPU来实现，你们以为AlexNet是2GPU的缘故

>>阅读原文<<