研究人员开发了Rigel,这是一种用于评估图像和视频字幕生成系统的新指标,旨在比现有方法更好地与人类判断保持一致。Rigel采用自蒸馏分数自适应方法,其中一个特定于评估的评分头从大型语言模型中蒸馏出来,然后用人类判断数据进行精炼。该方法通过关注与任务对齐的评分来避免大型词汇语言模型的局限性。Rigel的有效性通过新构建的Vid-Lepus数据集得到证明,在ActivityNet-Fact等基准测试中显示出比当前最先进指标的显著改进。 AI
影响 这项新指标可能导致对多模态AI系统进行更准确的基准测试,从而推动图像和视频字幕生成领域的进步。
排序理由 该集群描述了一篇介绍新AI评估指标的新研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →