中文词法分析与句法分析融合策略研究  

Research on Strategies for Integrating Chinese Lexical Analysis and Parsing

作　　者：米海涛 熊德意[1] 刘群[1] 

机构地区：[1]中国科学院智能信息处理重点实验室

出　　处：《中文信息学报》2008年第2期10-17,共8页Journal of Chinese Information Processing

基　　金：国家自然科学基金资助项目(60603095,60573188)

摘　　要：利用外部资源是提升句法分析性能的一种有效方法。本文利用中文词法分析器这一外部资源,提出了一种通用转换方法将中文词法分析器与句法分析器有机地融合在一起。通过基于转换的错误驱动学习和条件随机场解决不同切词、词性标注标准间的转换问题。在句法分析方面,本文提出了多子模型句法分析器,将中心词驱动模型和结构上下文模型有效结合在一起。融合后的中文句法分析性能在宾州中文树库1.0版①测试集上F1值达到了82.5%的最好水平。External resources can be used effectively to improve the parsing accuracy. In this paper, we introduce an external Chinese lexical analysis system to parsing and propose a general transformation methd to integrate them. The Transformation-based Error-driven Learning and Conditional Random Fields are used to solve the problem of transformation between two different standards of segmentation and POS tagging. We also propose a parsing model which combines the Head-driven parsing model and Structural Context parsing model effectively. Experimental re suhs show that our new integrated parsing model achieves an F1 score of 82. 5% on the Penn Chinese Tree-Bank Version 1.0, higher than the state-of-art parsers.

关 键 词：计算机应用 中文信息处理 中文句法分析 中文词法分析 融合策略 基于转换的错误驱动学习 条件随机场 

分 类 号：TP391[自动化与计算机技术—计算机应用技术]