【经典神经网络】-AlexNet/VGG/GoogLeNet/ResNet

1 AlexNet(2012,ImageNet冠军, CNN用于图像分类的开山之作) 结构:5 卷积层+3个全连接层(卷积核size:11,5,3) 特点: ReLU 激活函数 (避免了sigmoid的梯度消失-反向传播的时候会连乘sigmoid的导数,初始值很大的话导数接近于0,导致前层网络梯度越来越小;计算量减小,加快了训练速度) LRN(Local Response Normalizatio
相关文章
相关标签/搜索