由粗到精的哈萨克语短语结构句法分析研究
2018-04-04梁金莲古丽拉阿东别克
中文信息学报 2018年1期
梁金莲,古丽拉·阿东别克
(1. 新疆大学 信息科学与工程学院,新疆 乌鲁木齐 830046; 2. 新疆多语种信息技术实验室,新疆大学,新疆 乌鲁木齐 830046;3. 国家语言资源监测与研究少数民族语言中心哈萨克和柯尔克孜语文基地,新疆大学,新疆 乌鲁木齐 830046)
0 引言
自然语言处理过程一般包含词性分析、句法分析和语义分析。句法分析是自然语言处理的核心技术之一[1]。目前句法分析的主要方法包括基于规则的方法和基于统计的方法。基于统计的句法分析方法在处理歧义等方面有较好的效果,相对也比较灵活。基于统计的方法在自然语言处理领域已逐渐成为主流[2]方法。
目前,哈萨克语的研究已经完成了词法分析[3]的研究,进行到句法分析阶段。其中,文献[4]中提出一种规则与最大熵结合的方法对哈萨克语基本动词短语进行识别;文献[5]提出了一种基于条件随机场模型的哈萨克语的基本短语自动识别方法;文献[6]采用基于规则自动识别及人工标注的方法建立基本名词短语标注语料库,在句法分析阶段也进行了相关的研究。文献[3]中采用PCFG方法,结合自底向下的Vitrtbi算法实现一种有自学能力的哈萨克语句法分析器: 文献[7]中根据概率上下文无关文法模型和Chart算法特点,将概率引入Chart算法,提出一种PChart算法,实现一种基于PChart算法的哈萨克语句法分析器。在句法分析研究中,无论是基于统计的方法还是基于规则的方法,都不能完全解决句法分析的问题,只有将两者结合起来,才有可能最大限度地解决句法分析中存在的问题。……
登录APP查看全文
