PulseAugur
中
实时 06:41:32
English(EN) GDP.xlsx: Benchmarking Frontier Models on Professional Workbooks

新的 GDP.xlsx 基准测试显示前沿 AI 模型在处理专业工作簿时遇到困难

一个名为 GDP.xlsx 的新基准测试已被开发出来,用于评估前沿 AI 模型在处理现实工作场所任务方面的能力。该基准测试包含来自 13 个专业领域的 70 个请求,每个请求都附有专家评分标准以及相关的工作簿或 CSV 文件。在包括 Google、Anthropic 和 OpenAI 的领先模型在内的 20 种模型配置中,表现最佳的 Gemini 4 Argon 的通过率仅为 38.3%,这表明 AI 在处理复杂专业工作簿方面的能力仍有很大的提升空间。 AI

影响 凸显了当前前沿模型在复杂专业任务方面的显著局限性,表明需要改进在电子表格和数据处理方面的代理能力。

排序理由 该集群包含一篇介绍 AI 模型评估新基准的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的 GDP.xlsx 基准测试显示前沿 AI 模型在处理专业工作簿时遇到困难

本文如何被排名

Signal score
42 / 100
Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket
Tool
该集群包含一篇介绍 AI 模型评估新基准的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
Source corroboration
Single-source cluster
Only one publisher covered this so far. Single-source stories can still rank when the publisher is high-authority, but they lack cross-source corroboration.
Topics
paper, product
Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance
High
Clearly on-topic for AI-industry coverage.
Story freshness
Breaking (< 6h)
Fresh story with cross-source coverage still developing. Ranking may shift as more sources report.

完整方法见我们的编辑标准。

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Suhaas Garre, Sushant Mehta, Edwin Chen ·

    GDP.xlsx:在专业工作簿上对前沿模型进行基准测试

    arXiv:2611.17766v1 Announce Type: cross Abstract: We introduce GDP_xlsx, a benchmark of 70 realistic workplace requests written by professionals in 13 domains, each paired with an expert rubric of binary criteria and with the complete workbook or CSV file it refers to. Together t…