ARC-AGI 3
PulseAugur coverage of ARC-AGI 3 — every cluster mentioning ARC-AGI 3 across labs, papers, and developer communities, ranked by signal.
- 2026-06-09 research_milestone A research paper details an AI agent's performance on the ARC-AGI-3 benchmark using executable world models. 来源
5 天有情绪数据
-
OpenAI的GPT-5.6在ARC-AGI-3基准测试中展现巨大飞跃
OpenAI的新款GPT-5.6模型,特别是Sol版本,在ARC-AGI-3基准测试中取得了7.8%的分数,该测试旨在挑战AI的流体智力。虽然这一分数与人类的表现(90%以上)相比显著偏低,但它代表了比以往AI模型巨大的飞跃,GPT-5.5的得分仅为0.43%,Anthropic的Opus 4.8得分为1.5%。该模型还展现了高效率,在早期的ARC-AGI版本中取得了90%以上的分数。
-
AI 模型在复杂推理测试中表现不佳,银行探索 AI 用于房产检查
三菱 UFJ 银行正在探索使用卫星图像和 AI 来检查抵押品房产,并计划在下一财年开始实施。与此同时,有报道称 GPT-5.5 和 Claude Opus 4.7 在 ARC-AGI-3 测试中的表现不佳,准确率不足 1%,这被描述为“惨败”,并对其人类水平的推理能力提出了质疑。
-
Fable 5 缺失 ARC-AGI 3 基准测试,用户质疑 Anthropic
Reddit r/ClaudeAI 社区的一名用户正在质疑为何新发布的 Fable 5 模型尚未在 ARC-AGI 3 基准测试中进行评估。ARC-AGI 3 被认为是衡量抽象推理能力的关键测试,且尚未饱和,因此将其纳入对于评估新模型至关重要。用户指出,Anthropic 此前曾表示计划将 Fable 5 纳入此类基准测试。
-
新的LLM代理通过本体误差学习程序化世界模型
研究人员开发了OPINE-World,这是一种新颖的LLM代理,旨在通过交互学习程序化世界模型。该系统使用两个协作代理之间的假设和测试循环来合成代码中的世界模型,然后通过反例引导的归纳合成进行细化。OPINE-World特别擅长处理像素渲染环境,能够灵活地假设对象结构,并使用一种称为本体误差的贝叶斯度量来指导探索。在ARC-AGI-3基准测试的评估中,该基准测试隐藏了对象词汇和目标语义,OPINE-World在没有针对每个游戏进行训练…
-
新型LLM代理OPINE-World学习程序化世界模型
开发了一种名为OPINE-World的新型LLM代理,用于通过交互学习程序化世界模型,解决了深度网络模型的数据效率低下和可迁移性差的问题。OPINE-World使用两个协作代理之间的假设和测试循环,一个与环境交互,另一个以代码形式合成模型。该方法利用一种称为本体论错误的物体类型充分性度量来指导探索,并在ARC-AGI-3基准测试中表现强劲,在没有针对每个游戏进行训练的情况下解决了25个游戏中的20个。
-
Google LLC 团队解释 ARC-AGI 3 基准测试
ARC-AGI 3 基准测试由一个来自 Google LLC 的团队进行了解释,该团队目前在比赛中表现出色。该基准测试旨在评估通用人工智能能力。
-
人工智能支出削减预示行业可能下滑,成本盖过效用
人工智能行业正面临一个关键时刻,像Anthropic和OpenAI这样的领先公司声称的高运行收入受到质疑。据报道,包括Microsoft、Uber、Amazon和JPMorgan在内的大客户正在削减人工智能支出,因为成本高昂且长期价值或可靠性感知不足。这一趋势表明,人工智能收入的当前指数级增长可能不可持续,类似于一个“蜜月期”,如果人工智能工具不能证明其长期效用和成本效益,可能会导致更广泛的行业下滑。
-
AI代理使用可执行世界模型解决ARC-AGI-3基准测试
一篇新研究论文介绍了一种可执行世界模型方法,用于AI代理解决ARC-AGI-3基准测试。该系统使用Python来维护和验证世界模型,重构以简化并规划执行前的动作。在与GPT-5.5测试时,该代理解决了25个游戏中的15个,达到了58.12%的RHAE,而GPT-5.4解决了8个游戏,RHAE为41.29%。
-
纯代码脚本在ARC-AGI-3基准测试中表现优于LLM
一位程序员展示了,一个简单的Python脚本,运行在一台十年前的AMD CPU上,可以在新的ARC-AGI-3基准测试中取得4.76%的成绩。这一壮举凸显了当前大型语言模型的低效性,它们在基准测试的动态、无指令环境中挣扎,并且常常得分零。该脚本利用了基本的计算机视觉技术,如质心检测,来解决空间谜题,尽管其资源需求极低且没有使用AI token,但表现优于许多AI模型。
-
Anthropic 的 Claude Opus 4.8 在 ARC-AGI 3 基准测试中得分超过 1%
Anthropic 的 Claude Opus 4.8 在 ARC-AGI 3 基准测试中取得了超过 1% 的分数。这是首次有 AI 模型在此项挑战性评估中突破该阈值,标志着一个重要的里程碑。ARC-AGI 基准测试旨在测试 AI 的抽象推理能力,因此这一成就对该领域具有重要意义。
-
业余爱好者用免费Colab套餐挑战ARC-AGI 3
一个人正试图仅使用Google Colab的免费套餐来解决ARC-AGI 3挑战。此举旨在证明,无需依赖昂贵、专有的资源即可实现先进的AI能力,这可能会挑战围绕AGI发展的普遍论调。
-
Claude Opus 4.7和GPT 5.5在ARC-AGI-3上进行测试,出现令人惊讶的结果
最近的一次ARC Prize评估在ARC-AGI-3基准测试上对Anthropic的Claude Opus 4.7和OpenAI的GPT 5.5进行了测试。结果显示出意料之外的成果,尽管并非以最显而易见的方式。这些惊喜的具体性质在提供的信息中未详述。
-
GPT-5.5 和 Opus 4.7 在 ARC-AGI-3 基准测试中显示出系统性推理失败
一项新的基准测试 ARC-AGI-3 揭示了 GPT-5.5 和 Opus 4.7 等先进 AI 模型存在严重的推理错误。这些模型在该基准测试上的成功率仅为 0.8%,凸显了在抽象推理能力方面持续存在的差距。研究结果表明,尽管技术取得了进步,但当前的 AI 系统在基本的人类水平任务方面仍面临困难。
-
ARC-AGI-3 基准测试挑战顶级AI模型,同时AI的经济和地缘政治影响引发辩论
最近的一项分析突显了AI领域的重大进展,包括对AI行业的7250亿美元巨额投资以及美国政府将AI模型列为国家资源的意图。在AI能力方面,据报道ARC-AGI-3在ARC-AGI-3基准测试中得分极高,表现优于GPT-5.5和Opus-4.7等领先模型。此外,中国的一项法院裁决确立了公司不能将AI自动化成本转嫁给工人,这标志着在技术进步面前劳工保护采取了不同的方法。