多模态检索之CCA算法

             多模态检索主要是实现不一样模态下的数据能相互检索,例如文本模态数据,和图像模态数据。要能实现他们之间的相互检索,首先要是它们相互关联起来。CCA·算法用于多模态检索步骤:      1)首先提取文本,图像各自的底层特征,也就是会获得不一样维度矩阵。      2)将训练数据去中心化后,利用CCA算法将不一样维度的数据映射到相同的子空间,而后使训练的文本和图像特征相关联起来
相关文章
相关标签/搜索