研究人员推出了4DMemoryBench,这是一个旨在评估和改进基础模型在长时域内的时空推理能力的新基准。该基准包括LongVideo数据集,包含约900小时的视频和5000多个问题,以及4DMemory Harness,一个结合了专用工具模型和检索增强生成的集成系统。对13个领先模型的评估显示,与之前的基准相比,在4DMemoryBench上的性能显著下降,但4DMemory Harness将所有测试模型的长时域任务性能提高了50%以上。 AI
影响 该基准有望推动能够理解和推理复杂、长时间事件的AI代理的发展。
排序理由 该集群描述了一篇介绍AI研究基准和数据集的新学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →