基于语料库的字母词语自动提取研究

分享到

【获取途径】超星期刊网
【作者】郑泽之，张普，杨建国
【刊名】中文信息学报
【作者单位】太原师范学院计算机系,北京语言大学DCC博士研究室,北京语言大学DCC博士研究室山西太原030012北京语言大学DCC博士研究室,北京100083 ,北京100083 ,北京100083
【年份】2005
【卷号】第19卷
【期号】第2期
【页码】78-85
【ISSN】1003-0077
【关键词】人工智能自然语言处理字母词语自动提取
【摘要】目前 ,很多最新的术语和专有名词 ,首先以字母词语的形式出现在汉语中 ,并日益广泛应用。而字母词语多数是汉语自动分词中的未登录词 ,其正确识别 ,将有助于提高中文分词、信息检索、搜索引擎、机器翻译等应用软件的质量。本文在对字母词语进行先期考察的基础上 ,分析了字母词语组成情况的复杂特征和自动识别的难点 ,结合字母词语的各种统计特征和其独有的特点———字母串“锚点” ,提出了从中心往两边扩展的规则加统计辅助的字母词语自动提取的算法。并且对字母词语的双语同现问题进行了处理。算法简单 ,但有效。召回率...
【文献类型】期刊