PulseAugur
实时 10:25:29
English(EN) Grok 4.6 made me wonder: how much of CursorBench is the model, and how much is the harness?

Reddit 质疑 CursorBench 的模型与线束测量

Reddit 上的一场讨论质疑了 CursorBench 作为 AI 模型基准测试的有效性,特别是考察了 Grok 4.6 的表现。提出的核心问题是,该基准测试衡量的是模型的能力还是 Cursor 提供的“线束”,尤其是考虑到 Grok 4.6 是与 Cursor 联合开发的。该帖子认为,每 token 成本可能是编码代理过时的指标,提出考虑上下文增长和恢复等因素,完成任务的可靠成本更为相关。 AI

影响 引发了关于如何衡量和评估 AI 编码代理性能的问题。

排序理由 Reddit 讨论质疑特定 AI 基准测试的有效性。

在 r/cursor 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

Reddit 质疑 CursorBench 的模型与线束测量

报道来源 [1]

  1. r/cursor TIER_2 English(EN) · /u/serdardogrubakar ·

    Grok 4.6 让我不禁思考:CursorBench 中模型占多少,框架又占多少?

    <!-- SC_OFF --><div class="md"><p>I was looking through the Grok 4.6 results and CursorBench 3.2, and the score itself ended up being the least interesting part to me.</p> <p>Grok 4.6 Extra High is currently at 70.8% with $2.81/task and 46 steps, while Fable 5 Max is at 70.5% wit…