研究人员已将 Microsoft 的量子计算课程 QuantumKatas 改编到广泛使用的 Qiskit 框架中，创建了一个用于评估大型语言模型 (LLM) 的新基准。该基准包含 350 个任务，涵盖 26 个类别，从基本门到高级算法和纠错。对 16 个 LLM 的初步评估显示了能力上的显著差异，前沿模型和开源模型之间存在明显差距，并突出了模型擅长的领域（如实现已知算法）和挣扎的领域（如问题编码）。 AI
影响 该基准有望加速 LLM 在量子计算等复杂科学领域能力的研究。
排序理由 该集群描述了一个基于研究论文的、用于评估 LLM 在量子计算任务上表现的新学术基准。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →
arXiv:2605.27210v1 Announce Type: cross Abstract: We adapt Microsoft's QuantumKatas -- a well-established quantum computing curriculum -- from Q# to Qiskit, the most widely-adopted quantum computing framework, and package it with an evaluation framework for systematic LLM assessm…
We adapt Microsoft's QuantumKatas -- a well-established quantum computing curriculum -- from Q# to Qiskit, the most widely-adopted quantum computing framework, and package it with an evaluation framework for systematic LLM assessment. The resulting benchmark comprises 350 tasks a…