本申请旨在研究一种面向多语言智能文本信息处理的基于主题语义空间的文本表示机制TDR。该机制在保持LSI"语义扩充,能解决一义多词问题"的基础上,利用双语译词对之间的词义限制来解决"一词多义"问题,并设计一套概率模型和学习方法将蕴含在文本集合中的主题有意识地合理地分离出来,构建基于主题的语义空间,进而在这个主题语义空间上进行词义消歧、文本表示和文本间相似度计算。理论上,与LSI相比,利用TDR构建出的语义空间能够更加准确地反映词语和词语、词语和文本、文本和文本之间相对于文本主题的语义关联,从而有效地解决文本表示中的"语言障碍"、"一词多义"、"一义多词"等问题,为文本相似度判断提供可靠的依据。
本申请旨在研究一种面向多语言智能文本信息处理的基于主题语义空间的文本表示机制TDR。该机制在保持LSI"语义扩充,能解决一义多词问题"的基础上,利用双语译词对之间的词义限制来解决"一词多义"问题,并设计一套概率模型和学习方法将蕴含在文本集合中的主题有意识地合理地分离出来,构建基于主题的语义空间,进而在这个主题语义空间上进行词义消歧、文本表示和文本间相似度计算。理论上,与LSI相比,利用TDR构建出的语义空间能够更加准确地反映词语和词语、词语和文本、文本和文本之间相对于文本主题的语义关联,从而有效地解决文本表示中的"语言障碍"、"一词多义"、"一义多词"等问题,为文本相似度判断提供可靠的依据。