索绪尔难题与汉语智能分词  

作　　者：艾朝阳[1] 王淑禾 

机构地区：[1]湖南大学外国语学院,410082 [2]湖南大学语言智能与非遗文化跨学科研究中心

出　　处：《汉字文化》2021年第19期146-148,共3页Sinogram Culture

基　　金：教育部人文社科基金项目(编号:18YJAZH001);湖南省社科基金项目(编号:14YBA084);湖南省教育科学规划重点课题(编号:XJK015AGD003)的阶段性研究成果。

摘　　要：词、句乃至语言的实体单位和词的界限问题统称为"索绪尔困境"。智能分词是指以人工智能为导向的机器自动分词。中文自动分词问题处在汉语信息化、机器翻译和人工智能等研究热点的交汇点,一直是中文信息处理中的一个长期且艰巨的任务,但很少见语言学理论为中文自动分词和智能分词提供指导。本文提出的语言边界思想发现分词能力是人的核心语言能力或边界能力。语言边界思想力图使语言边界方法乃至语言学为当今人工智能、生物智能、机器翻译等信息和智能技术提供有效的理论指导和方法启迪。

关 键 词：索绪尔难题 汉语智能分词 边界能力 

分 类 号：H0-06[语言文字—语言学]