位置:成果数据库 > 期刊 > 期刊详情页
词汇相似度约束的短语抽取
  • 期刊名称:哈尔滨工业大学学报
  • 时间:0
  • 页码:775-778
  • 语言:中文
  • 分类:TP391[自动化与计算机技术—计算机应用技术;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]哈尔滨工业大学语言语音教育部-微软重点实验室,哈尔滨150001, [2]哈尔滨工业大学媒体技术与艺术系,哈尔滨150001
  • 相关基金:国家自然科学基金重点资助项目(60736014); 国家高技术研究发展计划重点资助项目(2006AA010208)
  • 相关项目:融合语言知识与统计模型的机器翻译方法研究
中文摘要:

为克服传统的短语抽取方法对词对齐信息的依赖性强,抗噪声能力差这一缺陷,提出基于词汇相似度约束的短语抽取策略;在此框架下,提出了3种基于词汇相似度的约束方法:Dice系数、Phi平方系数和对数似然比.在IWSLT2004语料上进行的实验表明,3种基于词汇相似度的约束方法的翻译系统的BLEU评分均优于传统的翻译系统;其中基于对数似然比方法得到的翻译模型比基线系统Pharaoh的BLEU-4评分提高了15.14%.

英文摘要:

Aimed at the problem that the traditional phrase extraction method is strictly dependent on word alignments,and is not pruned to alignment errors,a loose phrase extraction method,which does not strictly depend on word alignments.In this method,constraints are posed on alignment points to avoid ill-formed phrase pairs.Three constraint strategies are proposed based on word similarities:Dice coefficient,Phi-square coefficient and log-likelihood ratio.Experiments were carried out on the corpus of IWSLT 2004.Results show that the BLEU scores of the best results of loose phrase extraction can be improved by 15.14%,compared with the baseline system Pharaoh.

同期刊论文项目
期刊论文 77 会议论文 94 专利 4 著作 2
同项目期刊论文