基于多模态融合和时空上下文语义的跨媒体检索模型的研究

被引：7
作者：
刘扬 [1 ,2 ]
郑逢斌 [1 ,2 ]
姜保庆 [1 ,3 ]
蔡坤 [1 ,3 ]
机构：
[1] 河南大学计算机与信息工程学院
[2] 河南大学智能技术与系统重点实验室
[3] 河南大学数据与知识工程研究所
来源：
计算机应用 | 2009年 / 29卷 / 04期
关键词：
多模态融合描述; 时空上下文语义; 基于内容的检索; 跨媒体检索; 多媒体信息检索;
D O I：
暂无
中图分类号：
TP311.52 [];
学科分类号：
081202 ; 0835 ;
摘要：
如何跨越低层特征描述到高层语义知识的"语义鸿沟"已成为跨媒体检索(CMR)问题的关键,提出一个基于多模态融合描述和时空上下文语义的跨媒体检索模型,对多模态融合的特征采用主成分分析(PCA)和独立成分分析(ICA)相结合的降维算法、采用基于支持向量机(SVM)和隐马尔可夫模型(HMM)的混合分类器进行语义映射,同时给出了时空模糊聚类分析方法和基于相关反馈的跨媒体检索算法。并在此基础上开发出基于该模型的原型系统,成功验证了该模型的可行性和正确性,可为相关系统的设计者提供思路。
引用
收藏
页码：1182 / 1187
页数：6
相关论文
共 8 条
[1]   一种支持海量跨媒体检索的集成索引结构 [J].
庄毅 ;
庄越挺 ;
吴飞 .
软件学报, 2008, (10) :2667-2680
[2]   一种基于内容相关性的跨媒体检索方法 [J].
张鸿 ;
吴飞 ;
庄越挺 ;
陈建勋 .
计算机学报, 2008, (05) :820-826
[3]   一种多模态信息融合的视频检索模型 [J].
张静 ;
俞辉 .
计算机应用, 2008, (01) :199-201+213
[4]   遗传小波神经网络实现人脸和语音的认证系统 [J].
刘扬 ;
曹宝峰 ;
李茂生 .
计算机工程与应用, 2006, (18) :50-52+98
[5]   多媒体交叉参照检索系统研究 [J].
庄越挺 ;
吴聪苗 ;
吴飞 ;
刘翔 .
计算机辅助设计与图形学学报, 2005, (04) :834-839
[6]   时空拓扑关系定义及时态拓扑关系描述 [J].
舒红 ;
陈军 ;
杜道生 ;
樊启斌 .
测绘学报 , 1997, (04) :20-27
[7]   隶属云和隶属云发生器 [J].
李德毅，孟海军，史雪梅 .
计算机研究与发展 , 1995, (06) :15-20
[8]   A Novel Cross-Media Layered Semantic Mining Model [J].
ZENG Cheng CAO Jiaheng PENG Zhiyong WANG Ke WANG Hui State Key Laboratory of Software Engineering Wuhan University Wuhan Hubei China School of Computer Wuhan University Wuhan Hubei China .
WuhanUniversityJournalofNaturalSciences, 2008, (01) :21-26
1