研究人员开发了一个新的科学代码搜索数据集和基准测试，以应对在数百万个 GitHub 存储库中查找相关软件的挑战。该数据集包含来自 NASA 五个部门的 5,264 个分类科学存储库，其中包括专家精心策划的存储库搜索查询和一个大规模代码片段检索基准测试。初步评估突出了不同科学领域和编程语言之间的性能差异，表明有效科学代码发现的难度。 AI
影响 该基准测试可以改进用于科学研究的 AI 驱动的代码发现工具。
排序理由 该集群描述了一篇介绍科学代码搜索数据集和基准测试的新学术论文。
在 arXiv cs.IR (Information Retrieval) 阅读 →
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →
arXiv:2607.05443v1 Announce Type: cross Abstract: Scientists increasingly rely on open-source tools to support their research workflows, yet discovering relevant software among over 600 million GitHub repositories remains challenging. Existing code search benchmarks focus on gene…
Scientists increasingly rely on open-source tools to support their research workflows, yet discovering relevant software among over 600 million GitHub repositories remains challenging. Existing code search benchmarks focus on general software engineering tasks and fail to capture…