Meta 的新前沿模型 Muse Wonder 在早期基准测试中表现出惊人的速度,在 59 回合内到达了 Pokémon Red 游戏的 Viridian City。然而,该模型在 Viridian Forest 中卡了 792 回合以上,花费近 100 美元,未能击败第一个道馆馆主 Brock。这与 Opus 5.5 在 271 回合内以低于 9 美元的价格完成游戏形成了鲜明对比,突显了 Muse Wonder 的宣传能力与其真实世界性能之间存在巨大差距。 AI
影响 凸显了人工智能模型基准测试与真实世界性能之间的差距,表明当前的前沿模型可能仍在处理复杂、非脚本化任务方面遇到困难。
排序理由 文章讨论了一个新人工智能模型的真实世界性能故障,并将其与基准测试声明和历史背景进行了对比,但并未将其呈现为官方发布或研究论文。
- Artificial Analysis
- Astra
- Brock
- Kalshi
- Meta
- Muse Code
- Muse Spark
- Muse Wonder
- Opus 5.5
- Polymarket
- Wonder Full
- Yann LeCun
- Zuck
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →