研究人员推出DELA,一个旨在增强扩散语言模型(DLMs)可控编辑能力的新框架。DELA作为一个插件运行,通过插入、删除和重新遮蔽等操作实现显式的草稿精炼,同时保持核心DLM冻结。该方法将高级编辑控制与令牌级生成分离,通过采用两阶段解码过程来解决计算效率低下问题,该过程在草稿阶段优化KV缓存重用,并在后续精炼阶段允许有针对性的非单调编辑。实验表明,DELA可以将数学推理和代码生成等任务的性能提高多达5.5个百分点。 AI
影响 增强了扩散模型中文本生成的控制能力,可能提高代码生成和数学推理等任务的性能。
排序理由 该集群包含一篇详细介绍扩散语言模型新框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →