天桥调参师秘籍：一份深度学习超参微调技术指南

随着深度学习的兴起，越来越多的人从事算法工程师这一岗位。有时候他们自嘲自己为“天桥调参师”。当然，算法工程师的工作内容并没有那么简单，因为设置超参数的过程需要专业知识和广泛的试验和试错过程。尤其是针对学习率（learning rate）、批量大小（batch size）、动量（ momentum）和权重衰减（weight decay）这些超参数而言，没有简单易行的方法来设置。 深度学习模型充满了超

>>阅读原文<<