PulseAugur
实时 05:54:27
English(EN) AI's Capability in Assisting Scientific Research in Physics, Astrophysics, and Cosmology II: Project Planning and Proposal Evaluation

AI模型在辅助科学研究方面表现不一,研究发现 · 追踪2个来源

一项发表在arXiv上的新研究分为两部分,探讨了大型语言模型(LLMs)在辅助科学研究方面的能力。第一篇论文详细介绍了2025年中期的模型如ChatGPT、Claude和DeepSeek在生成项目计划和评估提案方面的表现,发现尽管人类评审员对AI生成的提案的评价与人类撰写的提案相似,但AI评审员更偏爱AI生成的内容。第二篇论文侧重于文献综述辅助,显示2025年中期的LLMs仅选择了少量与人类专家重叠的参考文献,并且经常生成带有元数据错误的参考文献,尽管2026年的模型ChatGPT Pro 5.5表现出更高的可靠性。 AI

影响 LLMs在项目规划和文献综述等科学研究任务中显示出辅助潜力,但由于存在偏见和潜在错误,需要仔细验证。

排序理由 该集群包含两篇发表在arXiv上的学术论文,详细介绍了对AI能力的研究。

在 arXiv cs.CL 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

AI模型在辅助科学研究方面表现不一,研究发现 · 追踪2个来源

报道来源 [2]

  1. arXiv cs.CL TIER_1 English(EN) · Jia Liu, Veena Krishnaraj, Kateryna Vovk, Kosuke Aizawa, Adrian E. Bayer, Linda Blot, Jessica Cowell, Suyog Garg, Jonathan Gr\'ee, Anamaria Hell, Ben Horowitz, Masaya Ichikawa, Kanyuni Iemoto, Keigo Kondo, Zacharie Lorsin, Kevin McCarthy, Jamie Robinson,… ·

    人工智能在物理学、天体物理学和宇宙学研究中的辅助能力II:项目规划与提案评估

    arXiv:2607.25881v1 Announce Type: new Abstract: We investigate how well large language models (LLMs) can assist scientific project planning and proposal evaluation. One-page project plans were independently generated for eight expert-conceived research projects in physics, astrop…

  2. arXiv cs.CL TIER_1 English(EN) · Anamaria Hell, Kateryna Vovk, Veena Krishnaraj, Jia Liu, Kosuke Aizawa, Adrian E. Bayer, Linda Blot, Jessica Cowell, Suyog Garg, Jonathan Gr\'ee, Ben Horowitz, Masaya Ichikawa, Kanyuni Iemoto, Keigo Kondo, Zacharie Lorsin, Kevin McCarthy, Jamie Robinson,… ·

    人工智能在物理学、天体物理学和宇宙学科学研究中的辅助能力 I:文献综述

    arXiv:2607.25672v1 Announce Type: cross Abstract: We investigate how well large language models (LLMs) can assist with literature reviews for scientific research. We perform a controlled study of eight expert-conceived research projects across the areas of physics, astrophysics, …