residual attention network 论文阅读笔记

注意力机制主要运用在自然语言理解当中,但是随着深度学习的发展,注意力机制也引进了计算机视觉当中,本文是将计算机视觉中的注意力机制进行了进一步的总结与提炼,将之前的注意力机制提炼为了注意力模块,并将多个这样的注意力模块有机组合在一起,从而网络深度越深,所获得的效果越好,这一个网络架构就叫做残差注意力网络,并在Imagenet上取得了不错的提升。 本文主要创新点: 使用了stacked network
相关文章
相关标签/搜索