基于篇章上下文的统计机器翻译方法  

Improving Statistical Machine Translation by Document Context

在线阅读下载全文

作  者:于惠[1] 谢军[1] 熊皓[1] 吕雅娟[1] 刘群[1] 林守勋[1] 

机构地区:[1]中国科学院计算技术研究所智能信息处理重点实验室,北京100190

出  处:《中文信息学报》2013年第2期86-90,共5页Journal of Chinese Information Processing

基  金:国家自然科学基金资助项目(61202216);国家863计划资助项目(2011AA01A207)

摘  要:上下文信息对于统计机器翻译(Statistical Machine Translation,SMT)中的规则选择是很重要的,但是之前的SMT模型只利用了句子内部的上下文信息,没有利用到整个篇章的上下文信息。该文提出了一种利用篇章上下文信息的方法来提高规则选择的准确性,从而提高翻译的质量。首先利用向量空间模型获得训练语料的文档和测试集中文档的相似度,然后把相似度作为一个新的特征加入到短语模型中。实验结果表明,在英语到汉语的翻译工作中,该方法可以显著提高翻译质量。在NIST-08和CWMT-08两个测试集上BLEU值都有显著的提高。The present statistical machine translation(SMT) models only exploit the context information in a sentence and neglect that in the document which is more useful to find the correct translation.In this paper,we propose a new method of using the context of the whole document to improve the quality of SMT.We obtain the similarities between the documents of the training corpus and the documents of the test set using Vector Space Model.The similarity is then considered as a new feature and integrated into a phrase-based model.Large scale experiments show that our approach improves more than one point for NIST-08 and CWMT-08 in term of BLEU in English to Chinese translation task.

关 键 词:统计机器翻译 上下文信息 向量空间模型 

分 类 号:TP391[自动化与计算机技术—计算机应用技术]

 

参考文献:

正在载入数据...

 

二级参考文献:

正在载入数据...

 

耦合文献:

正在载入数据...

 

引证文献:

正在载入数据...

 

二级引证文献:

正在载入数据...

 

同被引文献:

正在载入数据...

 

相关期刊文献:

正在载入数据...

相关的主题
相关的作者对象
相关的机构对象