深度学习--如何系统地调试并选择超参数

咱们都知道，在深度学习乃至机器学习过程当中，有不少超参数须要调试。本文主要介绍深度学习超参数调试方法。dom 各参数重要性排序（由重要到不重要），排序根据吴恩达所述：机器学习 学习率、隐藏层单元数、mini batch大小、隐层数、学习率衰减系数。学习 根据博主调试代码的经验，重要性排序以下：spa 隐层数、隐藏层单元数、mini batch大小、学习率、学习率衰减系数。调试 Andrew Ng说

>>阅读原文<<