注意力机制

注意力机制直观上的理解就是人看一张图片，肯定是被图中某一部分吸引，而对应到NN，即是给整个图片的每个像素都赋予一个权重，希望得到注意力多的即权重大。 STN就是一个注意力机制，他是让图像把最需要的那一部分平移旋转缩放回来，相当于丢掉了不需要的部分。 而像SENet中的注意力机制，先把h*w*c2的特征直接在c2维度用平均池化把其变为1*1*c2，然后用多层感知机将其转化为每一层的权重即注意力，然后

>>阅读原文<<