一张手绘图带你搞懂空间注意力、通道注意力、local注意力及生成过程

soft attention（包括空间注意力、通道注意力）软注意学习的目的是选择细粒度的重要像素点，它们是pixel级。 hard attention( local 注意力) 硬注意学习则致力于搜索粗糙的潜在判别区域，它们是region级。 他们在功能上有很大的互补性。他们的结合使用可以提高模型的性能 下面讲解空间注意力、通道注意力、local 注意力的生成 空间注意力、通道注意力可行性解释 64

>>阅读原文<<