paperbot · PL 论文追踪

全部论文 待读 收藏

P2 Evaluating Terminology Translation in Machine Translation Systems via Metamorphic Testing

通过蜕变测试评估机器翻译系统中的术语翻译
ASE Proceedings of the 39th IEEE/ACM International Conference on Automated Software Engineering2024匹配度 3/10 · 论文用蜕变测试评估机器翻译术语翻译,属于软件测试/ML系统评估方向,与用户关注的静态分析、Agentic 程序、浮点程序分析、贝叶斯程序分析无直接关系;仅在“PL/测试技术应用于机器学习系统”上有间接关联。引用 3 inbox
Yihui Xu, Yanhui Li, Jun Wang, Xiaofang Zhang
crossref: 2026-09-12

AI 速览

一句话:提出用蜕变测试评估机器翻译术语翻译,摆脱对参考译文和双语词典的依赖。

机器翻译已融入日常生活,术语翻译的准确性对翻译结果至关重要。然而,Google Translate 等现有系统仍会偶尔出现术语翻译错误;当前术语翻译评估指标依赖参考译文和双语词典,难以支持大规模自动化 MT 系统测试。该论文研究如何通过蜕变测试(metamorphic testing)评估机器翻译系统中的术语翻译。方法上,它利用蜕变关系来构造测试或判定译文应满足的变换,从而在缺少参考译文和双语词典时检测术语翻译错误。摘要未给出具体实验结果,但核心贡献在于提出面向术语翻译的不依赖参考的大规模自动化测试思路。

问题
现有术语翻译评估依赖参考译文和双语词典,难以用于大规模自动化机器翻译系统测试。
方法
采用蜕变测试,通过蜕变关系生成或判定测试用例,在不依赖参考译文和词典的情况下检测术语翻译错误。
评估
摘要未说明具体评估方式与实验结果;从标题看,评估围绕蜕变测试检测术语翻译问题的有效性展开。
原文摘要(Abstract)

Machine translation has become an integral part of daily life, with terminology translation playing a crucial role in ensuring the accuracy of translation results. However, existing translation systems, such as Google Translate, have been shown to occasionally produce errors in terminology translation. Current metrics for assessing terminology translation rely on reference translations and bilingual dictionaries, limiting their effectiveness in large-scale automated MT system testing.

链接与引用

DOI 原文 ·

BibTeX
@inproceedings{paperbot8360,
  title = {Evaluating Terminology Translation in Machine Translation Systems via Metamorphic Testing},
  author = {Yihui Xu and Yanhui Li and Jun Wang and Xiaofang Zhang},
  booktitle = {ASE},
  year = {2024},
  doi = {10.1145/3691620.3695069}
}