Multi-head Quantum Neural Networks

量子神经网络取代大语言模型中的Transformer块

研究人员开发了一种新颖的多头量子神经网络（QNN），旨在替换大语言模型（LLM）中的Transformer块。这种量子模块与嘈杂中等规模量子（NISQ）设备兼容，目标是在不显著损失准确性的情况下减少参数数量。该方法将隐藏空间划分为更小的片段，并行处理它们，并通过经典线性层进行集成。在Qwen3-30B-A3B-Instruct-2507模型上的实验表明，单个多头QNN可以替换大部分Transformer块，并且其量子组件已在IBM H…