深度学习数据集的正确划分

cs231n第二讲图像分类里提到的： 当你在设计机器学习算法的时候，决不能使用测试集来进行调优。若是你使用测试集来调优，算法容易对测试集过拟合。从另外一个角度来讲，若是使用测试集来调优，实际上就是把测试集当作训练集，由测试集训练出来的算法再跑测试集，天然性能看起来会很好。这实际上是过于乐观了，实际部署起来效果就会差不少。因此，最终测试的时候再使用测试集，能够很好地近似度量你所设计的分类器的泛化性能

>>阅读原文<<