实体
Soofi
Soofi
PulseAugur coverage of Soofi — every cluster mentioning Soofi across labs, papers, and developer communities, ranked by signal.
总计 · 30天
4
90 天内 4
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
时间线
- 2026-07-24 research_milestone The Soofi consortium withdrew benchmark scores after discovering its training data contained paraphrased questions from the GPQA evaluation set. 来源
最近 · 第 1/1 页 · 共 4 条
-
欧洲的人工智能竞赛：在全球竞争中欧盟还能获胜吗？
一篇近期文章讨论了欧洲在全球人工智能竞赛中的地位，并质疑欧盟还能在哪些方面取得成功。文章还探讨了像 Soofi 这样的倡议的潜在影响和益处。
-
AI 基准测试污染可追溯至管道错误；分数被撤回
一个管道错误导致包括 GPQA 在内的四个 AI 基准测试受到污染。该问题源于 GPQA 评估集在 Hugging Face 上以 'train' 标签发布，导致一个管道根据名称而非预期含义错误地选择了它。这一疏忽已导致这些基准测试的分数被撤回，未来的数据集将 undergo allowlist validation and n-gram screening 以防止再次发生。
-
Soofi联盟因数据污染撤回GPQA基准分数
德国Soofi联盟已撤回其基准分数，原因是发现其训练数据包含GPQA评估集的释义问题。这种污染意味着之前报告的GPQA-Diamond基准11.1分的提升不再是衡量模型能力的有效指标。一名研究人员发现了这个问题，Soofi团队在一周内确认了数据污染。
-
Soofi AI模型领先于Qwen、Gemma、Nemotron、Ministral等竞争对手
据报道，Soofi AI模型在性能上显著领先于包括Qwen、Gemma、Nemotron和Ministral在内的其他模型。这一信息正在社交媒体上传播，多篇帖子强调了Soofi的领先地位。