实体
Curation-Bench
Curation-Bench
PulseAugur coverage of Curation-Bench — every cluster mentioning Curation-Bench across labs, papers, and developer communities, ranked by signal.
总计 · 30天
0
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
AI智能体可通过方法论脚手架实现数据策展自动化
研究人员开发了Curation-Bench，这是一个旨在测试通用AI智能体是否能够为AI开发自动化数据策展过程的新基准。在视觉-语言指令调优任务中，智能体展现了执行策展循环的能力，但在探索新的策略族方面遇到困难，反而专注于局部变化。当提供方法论指导和适应性脚手架时，智能体能够自主地组合出一种数据选择策略，该策略以显著更小的预算超越了现有基线，凸显了结构化适应而非简单提示的必要性。
-
AI智能体可实现数据策展自动化，但需要结构化指导
研究人员开发了Curation-Bench，一个旨在评估通用编程智能体自动化AI模型训练数据策展过程能力的新基准。初步测试表明，智能体可以在十次迭代内完成基本的数据选择，与现有基线相当。然而，智能体倾向于进行微小调整，而不是探索根本性的新数据策略家族。一种需要智能体引用和改编先前研究方法的脚手架式方法，促成了优越的数据选择策略的自主组合，该策略以显著更少的数据超越了已发布的基线。