浅谈NLP中Attention机制的理解

时间 2020-12-30

标签 NLP Attention RNN 繁體版

原文原文链接

1.什么是注意力机制？注意力机制模仿了生物观察行为的内部过程，即一种将内部经验和外部感觉对齐从而增加部分区域的观察精细度的机制。例如人的视觉在处理一张图片时，会通过快速扫描全局图像，获得需要重点关注的目标区域，也就是注意力焦点。然后对这一区域投入更多的注意力资源，以获得更多所需要关注的目标的细节信息，并抑制其它无用信息。图片来源：深度学习中的注意力机制，其中红色区域表示更关注的区域。 2|0E

>>阅读原文<<

1. 浅谈Attention机制理解
2. 浅谈 Attention 机制的理解
3. 浅谈attention机制
4. 浅谈seq2seq中的Attention机制
5. [NLP]Attention机制与self-Attention机制
6. [NLP/Attention]关于attention机制在nlp中的应用总结
7. NLP中的各种Attention机制
8. NLP系列 9. Attention机制
9. 【NLP复习】Attention机制
10. 浅析Attention机制
更多相关文章...
• ARP协议的工作机制详解 - TCP/IP教程
• TiDB数据库的管理机制 - NoSQL教程
• 漫谈MySQL的锁机制
• Scala 中文乱码解决