1020 Group

Pterodactyl系统利用LLM作为评判者，推进自动化翻译评估

研究人员开发了Pterodactyl，一个用于自动化翻译评估的新系统，专为WMT26共享任务设计。该系统利用LLM作为评判者（LLM-as-a-judge）的方法，专注于段落级质量评分预测和识别无错误段落。Pterodactyl针对翻译分类和数据策展中的二元分类进行了优化，其提示工程和模型选择均以接收者操作特征（ROC）分析为指导。