实体
Multidimensional Quality Metrics
Multidimensional Quality Metrics
PulseAugur coverage of Multidimensional Quality Metrics — every cluster mentioning Multidimensional Quality Metrics across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
新的LLM代理评估同声传译，改进了BLEU和COMET指标
研究人员开发了评估同声传译系统的新方法，解决了现有指标（如BLEU和COMET）的局限性。其中一种方法在arXiv论文中有所介绍，该方法使用LoRA适配的COMET-KIWI编码器来评估意义传递、交付质量和感知延迟，与标准方法相比，与人类评分的相关性有所提高。另一个系统EviSI则借鉴了多维度质量度量（MQM）的原则来评估语义保真度和口语表达，在英语到中文翻译方面与人类排名表现出高度一致性。
-
研究：提示设计提升了GPT-5.2对记者翻译的质量
一项新近发表在arXiv上的研究探讨了提示设计如何影响GPT-5.2生成的西班牙语到中文新闻翻译的质量。研究人员测试了48种条件，改变了提示类型和语言，并使用BLEU和BERTScore-F1等自动化指标以及通过多维度质量度量（MQM）框架进行的人工评估来评价翻译。虽然自动化指标偏好基线提示，但人工评估者发现面向简报的提示更优越，这表明驱动翻译理论的提示可以提高专家评审的质量，尤其是在减少生硬感方面，尽管它们对语言学习者的影响仍需进一步研究。