2017-CVPR-DenseNet

idea来源: 在随机深度网络(deep networks with stochastic depth)paper中,提出一种类似dropout的方法改进ResNet,作者发现在训练时每一步被随机丢掉一些层,可以显著提高ResNet的泛化性能。这带给作者两点启发: 神经网络的设计并不一定要是一个递进层次结构,也就是说网络中的某一层可以不仅仅依赖于紧邻的上一层的特征,而可以更依赖于更之前学到的特征。
本站公众号
   欢迎关注本站公众号,获取更多信息