谷歌的 Gemini 4 Argon 模型在使用提供商的 API 函数时,在 ARC-AGI-3 基准测试中取得了 97.5% 的分数。然而,在标准测试环境中,其性能显著下降至 49.8%。Epoch AI 的分析将该模型置于顶尖梯队,但其在数学和编程任务方面的表现较弱。 AI
影响 基准测试中的性能差异凸显了 LLM 测试环境的重要性。
排序理由 AI 模型的基准测试结果。[lever_c_demoted from research: ic=1 ai=1.0]
在 Mastodon — mastodon.social 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →