位置:成果数据库 > 期刊 > 期刊详情页
信息检索中一种基于词语-主题词相关度的语言模型
  • ISSN号:1003-0077
  • 期刊名称:《中文信息学报》
  • 时间:0
  • 分类:TP391[自动化与计算机技术—计算机应用技术;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]中国人民大学信息学院,北京100872, [2]教育部数据工程与知识工程重点实验室,北京100872
  • 相关基金:国家自然科学基金资助项目(60496325,60573092);国家科技攻关课题资助(2005BA112A02)
中文摘要:

本文提出一种基于词语主题词相关关系的语言模型TSA-LM (Term Subject Association Based Language Model ),它的基本思想是把一篇文档分成两个文档块,一部分是由领域主题词表中的主题词构成的主题词文档块,另一部分是由非主题词构成的非主题词文档块,分别计算两个文档块和查询的似然程度。对非主题词文档块,假设词语间独立无关,沿用经典的语言模型计算;对主题词文档块,把查询词语和主题词相关关系引入语言模型中来估计该文档块和查询的似然程度。词语-主题词相关关系采用词语一主题词相关度来衡量。词语主题词相关度的计算除了来源于对文档中词语一主题词共现性的观察外,还来源于宏观上对词语文档主题词归属关系的观察。公开数据集上的检索实验结果表明,基于词语一主题词相关关系的语言模型可以有效提高检索效果。

英文摘要:

We propose a Term-Subject-Association-based Language Model (TSA-LM) for document retrieval. Its main idea is to divide a document into two parts: one is only composed of subject words (named as subject block), and the other contains no subject words (named as non-subject block). Query-likelihood of a document is measured by the combination of the query-likelihood of the two blocks. For non-subject block, we follow classical language model. For subject block, we use the language model smoothed by term-subject association. The term-subject association is weighted by term-subject co-occurrence and term-document-subject labeling relationship. The experimental results on public dataset show that TSA-LM improves search effectiveness.

同期刊论文项目
期刊论文 37 会议论文 37 著作 1
同项目期刊论文
期刊信息
  • 《中文信息学报》
  • 北大核心期刊(2011版)
  • 主管单位:中国科学技术协会
  • 主办单位:中国中文信息学会 中国科学院软件研究所
  • 主编:孙茂松
  • 地址:北京海淀中关村南四街4号中科院软件所
  • 邮编:100190
  • 邮箱:jcip@iscas.ac.cn
  • 电话:010-62562916
  • 国际标准刊号:ISSN:1003-0077
  • 国内统一刊号:ISSN:11-2325/N
  • 邮发代号:
  • 获奖情况:
  • 国内外数据库收录:
  • 日本日本科学技术振兴机构数据库,中国中国科技核心期刊,中国北大核心期刊(2004版),中国北大核心期刊(2008版),中国北大核心期刊(2011版),中国北大核心期刊(2014版),中国北大核心期刊(2000版)
  • 被引量:9136