与 SENet 互补提升,华为诺亚提出自注意力新机制:Weight Excitation|ECCV2020

注意力机制、动态卷积最近几年被研究得非常透了,不过前述方法大多聚焦于特征图层面,而该文则是从权值角度出发提出了一种非常有意思的机制。该文所提方法仅作用于训练阶段,不会对推理造成任何的计算量消耗、网络结构改变,同时可取得媲美SE的性能提升,更重要的是它可以与SE相互促进。 论文: http://www.ecva.net/papers/eccv_2020/papers_ECCV/papers/1237
相关文章
相关标签/搜索