情感分类——self-Attention

序 本文为前文:Attention机制的延伸篇。 self-attenion对应的视频我的推荐李宏毅讲解的版本。偏向于求解,可是讲的很是nice。 首先,我的先作一个本身理解的比喻:attention其实能够看做一个有目标性的提取信息的过程,上一篇中的attention是根据target有选择性的提取source中的信息,那self-attention,其实就是本身提取本身的信息呗。 那按照这个很
相关文章
相关标签/搜索