深度学习参数初始化（weights initializer）策略大全

  前言：深度学习的初始化参数指的是在网络训练以前，对各个节点的权重和偏置进行初始化的过程，不少时候咱们觉得这个初始化是可有可无的，不须要什么讲究，可是实际上，一个参数的初始化关系到网络可否训练出好的结果或者是以多快的速度收敛，这都是相当重要的，有时候由于参数初始化的缘故，甚至得不到好的训练结果。本文就来讨论一下参数初始化到底有什么讲究以及常见的参数初始化的一些策略方法。阅读本文须要神经网络相关背

>>阅读原文<<