《动手学深度学习》---卷积神经网络复习

使用多通道能够拓展卷积层的模型参数。 假设将通道维看成特征维,将高和宽维度上的元素当成数据样本,那么1×1卷积层的做用与全链接层等价。 1×1卷积层一般用来调整网络层之间的通道数,并控制模型复杂度。 web 一方面,ReLU激活函数的计算更简单,例如它并无sigmoid激活函数中的求幂运算。另外一方面,ReLU激活函数在不一样的参数初始化方法下使模型更容易训练。这是因为当sigmoid激活函数输出
相关文章
相关标签/搜索