一项名为 RuneBench 的新基准测试,通过提供游戏维基来测试大型语言模型玩 RuneScape 游戏的能力。该基准测试显示,包括 Claude 在内的一些模型会过度思考策略并花费过多时间阅读文档,这对其性能产生了负面影响。Gemini 和 GPT 等其他模型在特定的游戏内任务中也表现不佳。 AI
影响 凸显了当前 LLM 在需要战略规划和执行的复杂现实世界任务中可能遇到的困难。
排序理由 该条目讨论了 LLM 玩电子游戏的基准测试,这是对 LLM 能力的评论,而不是核心 AI 发布或研究。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →