PulseAugur
实时 10:00:28

新基准测试LLM编码代理在科学成像任务上的表现

一项名为Imaging-101的新基准测试已被开发出来,用于评估大型语言模型(LLM)编码代理在科学计算成像领域的性能。该基准包含57个任务,每个任务都基于同行评审的论文,并被结构化为四个阶段的流程:预处理、正向物理建模、逆向求解器和可视化。对七个领先LLM的评估显示,在算法选择、处理物理约定和流程集成等方面存在显著挑战,这表明需要领域专业化的代理来协助计算成像任务。 AI

影响 突出了LLM编码代理在科学成像方面的具体能力差距,为开发领域专业化的AI助手指明了方向。

排序理由 该集群包含一篇介绍用于评估LLM编码代理的新基准的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新基准测试LLM编码代理在科学成像任务上的表现

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Siyi Chen, Jiahe Ying, Yixuan Jia, Yuxuan Gu, Enze Ye, Weimin Bai, Zhijun Zeng, Shaochi Ren, Binhong Gao, Yubing Li, Tianhan Zhang, He Sun ·

    Imaging-101:对科学计算成像领域的LLM编码代理进行基准测试

    arXiv:2607.10789v1 Announce Type: new Abstract: Computational imaging, which recovers hidden signals from indirect, noisy measurements, underpins quantitative discovery across scientific disciplines, yet building a correct reconstruction pipeline demands deep domain expertise and…