实体
COMET-KIWI
COMET-KIWI
PulseAugur coverage of COMET-KIWI — every cluster mentioning COMET-KIWI across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
新的LLM代理评估同声传译，改进了BLEU和COMET指标
研究人员开发了评估同声传译系统的新方法，解决了现有指标（如BLEU和COMET）的局限性。其中一种方法在arXiv论文中有所介绍，该方法使用LoRA适配的COMET-KIWI编码器来评估意义传递、交付质量和感知延迟，与标准方法相比，与人类评分的相关性有所提高。另一个系统EviSI则借鉴了多维度质量度量（MQM）的原则来评估语义保真度和口语表达，在英语到中文翻译方面与人类排名表现出高度一致性。
-
研究发现文学翻译在流畅性与忠实度之间存在权衡
一篇新发表在arXiv上的研究探讨了人类和机器在文学翻译中流畅性与忠实度之间的权衡。研究人员分析了来自106部小说中的13万多段译文，使用翻译特征分类器来衡量流畅性，并使用COMET-KIWI指标来衡量忠实度。研究结果表明，流畅性与忠实度之间存在持续的负相关，这意味着随着译文的流畅性提高，它们可能与原文的含义偏离得越多。这种模式在人类翻译和Google Translate的输出中都观察到，但在TranslateGemma中不那么明显。