基于人工智能的非语言信息增强技术在虚拟仿真外语学习中的应用——以“跨文化交际视域下走进韩国”虚拟仿真外语教学系统为例  

nhancing Non-Verbal Information in VR-Based Foreign Language Learning——An AI Approach in the Korean Intercultural Communication Simulation

作　　者：刘沛鑫 骆雨萌 陈秀秀 顾曰国[1] LIU Peixin;LUO Yumeng;CHEN Xiuxiu;GU Yueguo

机构地区：[1]北京外国语大学,北京市100089

出　　处：《外语电化教学》2024年第2期13-17,37,共6页Technology Enhanced Foreign Language Education

基　　金：北京外国语大学“双一流”重大(点)项目“科学研究类虚拟仿真外语教学理论与应用研究”(项目编号:2022SYLZD011);北京外国语大学北京高校高精尖学科“外语教育学”建设项目(项目编号:2020SYLZDXM011);北京外国语大学“双一流”建设项目“人工智能与人类语言实验室建设”(项目编号:2020SYLZDXM040);北京外国语大学青年学术创新团队项目“语言智能理论与技术应用创新”(项目编号:2023TD001)的阶段性成果。

摘　　要：现阶段虚拟现实外语学习系统存在人物表情、动作单一等跨文化交际非语言信息不足的现象。文章结合人工智能技术和跨文化交际研究专家的标注,对人物形象进行优化重绘,并将情感要素转化为人物的面部表情来生成生动、自然、高质量的交际活动视频;利用SadTalker数字人技术实现人物交际过程中的音视频同步;探讨情感表达在跨文化交际能力培养中的重要作用,并基于情感分析,采用扩散模型的蒙版模式将非语言信息中的面部表情要素融入跨文化交际课程内容。文章提出的非语言信息增强方法取得了较为显著的改善效果,可作为模块嵌入现有系统,实现现有课程内容的优化处理。

关 键 词：虚拟现实 跨文化交际 非语言信息 面部表情 

分 类 号：H319.3[语言文字—英语]