PulseAugur
实时 01:35:50
English(EN) Fable 5 has been out for a couple of days, why isn't it on ARC-AGI 3?

Fable 5 缺失 ARC-AGI 3 基准测试,用户质疑 Anthropic

Reddit r/ClaudeAI 社区的一名用户正在质疑为何新发布的 Fable 5 模型尚未在 ARC-AGI 3 基准测试中进行评估。ARC-AGI 3 被认为是衡量抽象推理能力的关键测试,且尚未饱和,因此将其纳入对于评估新模型至关重要。用户指出,Anthropic 此前曾表示计划将 Fable 5 纳入此类基准测试。 AI

影响 引发了关于 AI 模型在关键推理基准测试透明度和完整性的疑问。

排序理由 用户对新发布模型基准测试纳入情况的提问。

在 r/ClaudeAI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

Fable 5 缺失 ARC-AGI 3 基准测试,用户质疑 Anthropic

报道来源 [1]

  1. r/ClaudeAI TIER_2 English(EN) · /u/dasti73 ·

    Fable 5 上线几天了,为什么 ARC-AGI 3 上还没有?

    <!-- SC_OFF --><div class="md"><p>Considered by many to be the best benchmark for abstract reasoning, it's not saturated, and yet it's not included in several benchmarks, let alone this one. I understand they said they were going to do it.</p> </div><!-- SC_ON --> &#32; submitted…