已开发出一个名为CUSP的新基准，用于评估AI预测科学进步的能力。研究发现，尽管当前前沿AI模型能够识别出合理的研究方向，但在预测科学进步的实现和时间方面却面临困难。在不同科学领域，AI的表现差异显著，AI的进步比生物学、化学和物理学领域的进步更具可预测性，并且模型在其预测中表现出过度自信。 AI
影响 目前的AI系统在预测科学突破或其时间表方面尚不可靠，这表明需要进一步发展其预测能力。
排序理由 该集群包含一篇详细介绍新基准和AI能力评估的学术论文。
在 Hugging Face Daily Papers 阅读 →
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →
Artificial intelligence (AI) is increasingly embedded in scientific discovery, yet whether it can anticipate scientific progress remains unclear. To study this question, we introduce a temporally grounded evaluation framework for forecasting scientific progress under controlled k…
Current AI systems demonstrate limited capability in predicting scientific progress, showing inconsistent performance across domains and systematic overconfidence in forecasts.