什么是句对齐?AI 如何把对应的句子配成对
句对齐是什么?AI 如何把中英文或前后版本里的句子配成对,它和机器翻译有何不同,以及一边漏译时为什么不能强行一一对应。
编辑部 ·
句对齐(Sentence Alignment)把两份对应文本里的句子配成组合。一份是中文合同,一份是它的英文译本;也可以是一段演讲和稍后整理的字幕。两边的句子数量常常不一样:一句中文可能对应两句英文,标题和页码也会插在中间。
配好的句子对可以用来整理术语、检查译文,以及给翻译模型提供例子。配错一对,后面的学习就会把不相关的两句当成对应。
它和翻译、匹配各管一段
机器翻译负责生成另一种语言的句子。句对齐假定两边的文本已经存在,任务是找出哪一句对应哪一句。文本匹配判断某两段是否相关;句对齐要在整篇里按顺序找出成对的句子。近重复检测找的是几乎相同的副本,句对齐找的是跨语言或跨版本的对应关系。
什么时候不能强行配对?
可以先用顺序、长度、数字和专名缩小范围,再核对意思是否对应。一边漏译、一边加了解释,或者段落被调换时,一对一的假设会失败。抽查时要连同前后句一起看,避免只凭几个相同的词就配上。对合同和字幕,保留原文位置,方便以后人工改配对。
小结
句对齐用来建立句子级的对应。它是整理平行文本的一步,配上的结果仍要抽查。