PulseAugur
实时 07:34:30
English(EN) K9-Bench: Evaluating Multimodal LLMs on Canine-Centric Videos

新的K9-Bench基准测试在狗视频上测试多模态大语言模型

研究人员推出了K9-Bench,这是一个旨在评估多模态大语言模型(MLLMs)在理解以犬类为中心的视频方面的能力的新基准。该基准由约5000个问答对组成,来源于907个视频,重点关注犬类的行为和互动理解。初步实验显示,当前前沿的MLLMs在这些专业任务上的零样本表现有限,在长视频序列中对细微线索的组合推理方面存在困难。 AI

影响 该基准测试有望推动AI对动物行为和互动进行更细致理解的发展。

排序理由 该集群包含一篇详细介绍用于评估AI模型的新基准的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的K9-Bench基准测试在狗视频上测试多模态大语言模型

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Khush Attarde, Yusuf Ali, Megha Thukral, Divye Bhutani, Thomas Ploetz, Zsolt Kira ·

    K9-Bench:评估以犬类为中心的视频中的多模态大语言模型

    arXiv:2607.02680v1 Announce Type: cross Abstract: MLLMs have shown strong zero-shot capabilities across diverse inputs such as across images, video, audio, and text. A crucial, yet underexplored, application of these models lies in understanding and modeling animal-centric scenar…