基于相关性的跨模态信息检索研究

被引:7
作者
丁恒 [1 ]
陆伟 [1 ,2 ]
机构
[1] 武汉大学信息管理学院
[2] 武汉大学信息资源研究中心
关键词
跨模态信息检索; 偏最小二乘法; 子空间投影;
D O I
暂无
中图分类号
TP391.3 [检索机];
学科分类号
081203 ; 0835 ;
摘要
【目的】梳理基于相关性的跨模态信息检索中的基本策略和核心问题,从提升检索效果的角度探讨偏最小二乘法用于特征子空间投影的优劣。【方法】在Wikipedia跨模态信息检索数据集上,分别采用LDA和BOW模型作为文本和图像资源的特征表达方式,以余弦距离作为相似度度量方法,利用最小二乘法替代典型相关性分析法学习特征子空间投影函数。【结果】从P@K、MAP和NDCG三个检索评价指标上,对比分析典型相关性分析、偏最小二乘回归、偏最小二乘相关三种特征子空间投影法对跨模态信息检索结果的影响,结果表明偏最小二乘相关法具有最佳效果。【局限】偏最小二乘法在处理数据时假设数据之间的关系是线性的,数据基向量之间是正交关系,因而无法解决非线性、非正交问题。【结论】使用偏最小二乘相关法学习的特征子空间投影与原始空间信息的一致性更强,跨模态信息检索结果更稳定。
引用
收藏
页码:17 / 23
页数:7
相关论文
共 10 条
[1]   基于LDA主题模型的短文本分类方法 [J].
张志飞 ;
苗夺谦 ;
高灿 .
计算机应用, 2013, 33 (06) :1587-1590
[2]   基于语义关联挖掘的数字图书馆跨媒体检索方法研究 [J].
明均仁 ;
何超 .
图书情报工作, 2013, 57 (07) :101-105
[3]   HDP主题模型的用户意图聚类 [J].
段瑞雪 ;
王小捷 ;
孙月萍 ;
李文峰 .
北京邮电大学学报, 2011, 34(S1) (S1) :55-58
[4]   用于图像场景分类的空间视觉词袋模型 [J].
王宇新 ;
郭禾 ;
何昌钦 ;
冯振 ;
贾棋 .
计算机科学, 2011, 38 (08) :265-268
[5]   向量相似度测度方法 [J].
张宇 ;
刘雨东 ;
计钊 .
声学技术, 2009, 28 (04) :532-536
[6]   基于Ontology的跨媒体检索技术 [J].
胡涛 ;
武港山 ;
任桐炜 ;
吉亮 .
计算机工程, 2009, 35 (08) :266-268
[7]   基于多模态融合和时空上下文语义的跨媒体检索模型的研究 [J].
刘扬 ;
郑逢斌 ;
姜保庆 ;
蔡坤 .
计算机应用, 2009, 29 (04) :1182-1187
[8]   基于特征子空间学习的跨媒体检索方法 [J].
张鸿 ;
吴飞 ;
庄越挺 .
模式识别与人工智能, 2008, 21 (06) :739-745
[9]  
基于相关性挖掘的跨媒体检索研究[D]. 张鸿.浙江大学. 2007
[10]  
A new approach to cross-modal multimedia retrieval .2 RASIWASIA N,PEREIRA J C,COVIELLO E,et al. ACM Proceedings of the 18th International Conference on Multimedia . 2010