PulseAugur
中
实时 18:22:30

新提出的并行解码器Transformer架构用于内在并行生成

作者 PulseAugur 编辑部 · [1 个来源] ·

研究人员提出了一种名为并行解码器Transformer（PDT）的新型架构，专为语言模型的内在并行生成而设计。与使用外部系统的现有方法不同，PDT在单个模型内集成了多个因果前沿。这种方法利用三个独立参数化的解码器堆栈，由一个在提示时设置的规划器指导，该规划器创建的轮廓通过持久的Plan-KV内存路由到特定的解码器。该系统目前处于实现和训练阶段，重点是理论设计和可证伪的评估协议，而不是即时的经验结果。 AI

影响 提出了一种新的并行生成架构方法，可能显著加快大型语言模型的推理时间。

排序理由 该集群包含一篇详细介绍新模型架构及其理论基础的学术论文，实证结果待定。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新提出的并行解码器Transformer架构用于内在并行生成

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Logan Robbins ·

    Parallel Decoder Transformer：规划器条件潜在协调用于模型内在并行生成

    arXiv:2512.10054v3 Announce Type: replace Abstract: Autoregressive language models expose one causal token frontier, even when the requested document contains sections that could be developed concurrently. Existing parallel-generation systems arrange external branches around an o…

相关话题