研究人员推出了AxQM,一个旨在评估大型语言模型在物理学形式化能力的新基准。该基准包含一千多个来自Nielsen和Chuang合著的教科书《量子计算与量子信息》的证明合成任务。AxQM是使用一个定制的有限维量子力学Lean库构建的,旨在成为目前最大的物理学证明合成基准,其任务数量是先前基准的四倍。该基准确保每个任务都有可验证的解决方案,并由Lean内核进行评分,以确认证明编译和未解析声明的缺失。 AI
影响 该基准有望加速在科学领域进行严格形式化的人工智能系统的开发。
排序理由 该集群描述了一个新的物理学形式化证明合成基准,该基准基于一本教科书并使用证明助手。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →