位置:成果数据库 > 期刊 > 期刊详情页
基于多模态概念关联图的视频检索
  • 期刊名称:计算机辅助设计与图形学学报
  • 时间:0
  • 页码:21-34
  • 分类:TP391[自动化与计算机技术—计算机应用技术;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]中国科学院计算技术研究所前瞻研究实验室,北京100190, [2]中国科学院研究生院,北京100049
  • 相关基金:国家“九七三”重点基础研究发展计划项目(2007CB311100); 国家“八六三”高技术研究发展计划(2007AA01Z416); 国家自然科学基金(60902090 60802067); 北京市教育委员会共建项目专项资助
  • 相关项目:基于轨迹的网络视频话题动态发现、跟踪和预测
中文摘要:

为了有效地提高基于概念的视频检索的检索性能,提出一种新颖的基于多模态概念关联图的视频检索方法.首先通过分析查询与概念之间的组织关系得到网状关系模型描述,并基于该模型构建概念关联图;然后提出查询与概念的多模态映射结构,将多模态查询融入概念关联图,增强概念扩展的针对性;之后使用流形排序动态地扩展索引概念集;全局稳态后采用正交的概念融合方法计算视频索引值,用于视频检索.与多种典型的基于概念的视频检索方法相比,文中方法的平均检索精度增幅达14.6%~86.2%.此外,实验结果表明,该方法在实际的交互式视频检索系统中也具有良好的适用性.

英文摘要:

A novel multi-modality concept correlation graph approach is proposed to promote the performance of concept-based video retrieval.Firstly,a net-style concept correlation graph is constructed using the original similarities among the concepts.Then,query is added into the graph based on a multi-modality mapping strategy between query and concept.Thirdly,ranking on manifolds algorithm is used to dynamically diffuse the concept correlations in this graph until a global stable state is achieved.Finally,the selected concepts are orthogonally fused to implement the video retrieval.In the experiments of automatic video retrieval,our approach has achieved great improvement from 14.6% to 86.2% over the state-of-art methods.Moreover,we also apply it to our interactive retrieval system and gains excellent performance and user experience.

同期刊论文项目
同项目期刊论文