计算机视觉中的注意力机制

计算机视觉中的注意力机制 历史背景 Attention机制在近几年来在图像,自然语言处理等领域中都取得了重要的突破,被证明有益于提高模型的性能。Attention机制本身也是符合人脑和人眼的感知机制。 简介 Attention机制,便是聚焦于局部信息的机制,比如图像中的某一个图像区域。随着任务的变化,注意力区域往往会发生变化。 如上图所示,如果从整体上来看,只看到很多头,但近距离看就会识别出很多科
相关文章
相关标签/搜索