一篇新的研究论文探讨了在实体级机器翻译中使用知识库作为黄金标准代理时可能发生的自指评估循环,特别是在低资源的历史领域。研究发现,相当一部分翻译,尤其是人名翻译,受到注入系统的知识库的影响,而不是独立评估。这种重叠人为地提高了翻译质量得分,掩盖了模型的真实性能,并表明从知识库注入中报告的收益通常是对先前性能的补充,而不是翻译能力的真正提高。 AI
影响 强调了评估机器翻译模型的潜在缺陷,尤其是在专业领域,影响了模型性能的评估方式。
排序理由 学术论文,详细介绍了机器翻译的一种新颖评估方法。 [lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →