来自多所大学和公司的研究人员开发了一个名为Realtime-Bench的新基准,用于评估AI系统在低延迟、实时任务中的性能。该基准包含50个交互式网页和游戏任务,旨在测试时间状态感知、自适应审议和时间感知动作选择能力。包括OpenAI、Anthropic和Google在内的当前前沿模型在“挂钟”评估中的表现不佳,最高得分仅为36%,表明其处理时间敏感操作的能力存在显著局限。 AI
影响 凸显了当前AI模型在实时、低延迟任务方面的局限性,为未来发展指明了方向。
排序理由 该集群描述了一个评估AI模型的新基准和研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- Anthropic
- Claude Fable 5-1
- Claude Opus-5
- Gemini 3.1-flash-live
- Gemini 3.8 Flash
- GPT 5.6 "Sol"
- GPT-Realtime-2
- Import AI
- Jack Clark
- Northwestern University
- Nvidia
- Ohio State University
- OpenAI
- OpenAI Decisions
- Realtime-Bench
- Steadyworks
- University of Illinois Urbana-Champaign
- University of Texas at Austin
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →