二、AI教程学习笔记 | 调试神经网络(三)

  1、调参 提高速度 一般在小数据集上合适的参数,在大数据集上效果也不会太差。因此可以尝试对数据进行精简,以提高速度,在有限的时间内可以尝试更多参数。 对训练数据进行采样。例如原来100W条数据,先采样成1W,进行实验看看。 减少训练类别。例如手写数字识别任务,原来是10个类别,那么我们可以先在2个类别上训练,看看结果如何。 超参数范围 建议优先在对数尺度上进行超参数搜索。比较典型的是学习率和正
相关文章
相关标签/搜索