位置:成果数据库 > 期刊 > 期刊详情页
基于条件随机域的词性标注模型
  • 期刊名称:姜维,关毅,王晓龙,基于条件随机域的词性标注模型,计算机工程与应用﹒ 2006年21期,13-16页
  • 时间:0
  • 分类:TP311[自动化与计算机技术—计算机软件与理论;自动化与计算机技术—计算机科学与技术]
  • 作者机构:[1]哈尔滨工业大学计算机科学与技术学院,哈尔滨150001
  • 相关基金:国家自然科学基金重点资助项目(编号:60435020);国家自然科学基金资助项目(编号:60504021)
  • 相关项目:面向智能化信息检索的危险式人工免疫网络理论与方法研究
中文摘要:

词性标注主要面临兼类词消歧以及未知词标注的难题,传统隐马尔科夫方法不易融合新特征,而最大熵马尔科夫模型存在标注偏置等问题.论文引入条件随机域建立词性标注模型,易于融合新的特征,并能解决标注偏置的问题.此外,又引入长距离特征有效地标注复杂兼类词,以及应用后缀词与命名实体识别等方法提高未知词的标注精度.在条件随机域模型框架下,进一步探讨了融合模型的方法及性能.词性标注开放实验表明,条件随机域模型获得了96.10%的标注精度.

英文摘要:

The main difficulties in POS tagging are multi-class word disambiguation and unknown word tagging. However,more features cannot be added into Hidden Markov Model,and there is label bias problem in Maximum Entropy Markov Model.So Conditional Random Field(CRF) is introduced to build POS tagging model in this paper,in order to overcome above problems.In addition,long distance features are extracted and utilized to label complicated multi-class word.As for the unknown word tagging,named entities recognition and suffix-based method etc. are adopted to improve the POS tagging performance.Moreover,we explore the mixing models' performance based on CRF.The experiment indicates our model can achieve a good performance with 96.10% tagging precision.

同期刊论文项目
同项目期刊论文