Quantum-Inspired Remasking

Diffusion language models framed as open quantum systems for novel text generation

研究人员通过将扩散语言模型的生成过程置于开放量子系统的背景下，开发了一种新颖的方法。这种理论联系使得探索新的生成技术成为可能，例如从提示或思想的叠加态生成文本。此外，该框架还支持一种称为量子启发重掩码（QIR）的方法，该方法根据置信度分数修改先前生成的标记，以提高整体文本质量。实验表明，这些基于叠加态的方法可以保留来自条件组件的信息，而 QIR 则提高了生成文本的质量。