个性化图像检索最大难题是图像低层视觉特征与高层语义之间的巨大语义鸿沟。为了克服语义鸿沟,本项目将视觉注意模型和视点跟踪技术相结合来建立视觉感知模型,从一个全新角度研究充分利用人眼视觉系统特性,得到客观反映用户语义的个性化兴趣信息,实现基于视觉感知的个性化图像检索。由于涉及对用户个性化兴趣等隐私信息的搜集与使用,在保证检索结果符合用户个性化查询需求的同时,研究一种具有隐私保护的个性化图像检索。具体研究内容包括(1)研究一种基于视觉注意模型和视点跟踪技术的视觉感知模型计算方法;(2)面向个性化图像检索,研究一种基于视觉感知的用户隐私保护方案;(3)利用视觉感知模型,构造能客观表达用户兴趣并具有隐私安全的用户兴趣文件,实现一个具有隐私保护的个性化图像检索系统。本项目的研究成果可广泛应用于信息安全、多媒体检索和人机交互等多媒体应用中,对提高这些应用系统的整体性能有着重要意义。
personalized image retrieval;semantic gap;visual perception model;privacy preservation;user profile
个性化图像检索最大难题是图像低层视觉特征与高层语义之间的巨大语义鸿沟。为了克服语义鸿沟,本项目将视觉注意模型和视点跟踪技术相结合来建立视觉感知模型,从一个全新角度研究充分利用人眼视觉系统特性,得到客观反映用户语义的个性化兴趣信息,实现基于视觉感知的个性化图像检索。由于涉及对用户个性化兴趣等隐私信息的搜集与使用,在保证检索结果符合用户个性化查询需求的同时,研究一种具有隐私保护的个性化图像检索。具体研究内容包括(1)研究一种基于视觉注意模型和视点跟踪技术的视觉感知模型计算方法;(2)面向个性化图像检索,研究一种基于视觉感知的用户隐私保护方案;(3)利用视觉感知模型,构造能客观表达用户兴趣并具有隐私安全的用户兴趣文件,实现一个具有隐私保护的个性化图像检索系统。取得的研究成果有(1)针对人眼视觉系统特性,提出了视觉注意模型快速算法、基于视觉注意模型的压缩域感兴趣区检测方法,基于注视兴趣度的感兴趣区检测方法,基于视觉感知模型的感兴趣区检测方法、基于视点跟踪的相关反馈以及基于视觉单词的图像检索方法等;(2)针对隐私保护问题,提出了面向个性化图像检索的隐私保护方案、加密域的图像检索方法、基于H.264的视频加密算法等。实验结果表明,所提算法达到并满足了具有隐私保护的个性化图像检索的需求。 本项目全面、按时完成了计划书中所规定的研究内容,达到并超过了计划书中的预期指标要求。在国内外学术期刊和国际会议上发表论文26篇,其中10篇被SCI收录、13篇被EI收录、1篇被ISTP收录、1篇获国际会议最佳论文奖;出版专著1部;申请发明专利5项;培养北京市属高校青年拔尖人才1名、硕士生7名。 本项目的研究成果可广泛应用于信息安全、多媒体检索和人机交互等多媒体应用中,对提高这些应用系统的整体性能有着重要意义。