PulseAugur
中
实时 07:50:02
实体 Mixture-of-Features Attention

Mixture-of-Features Attention

PulseAugur coverage of Mixture-of-Features Attention — every cluster mentioning Mixture-of-Features Attention across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_364031 ·

    DNeo模型通过增强特征编码加速LLM推理

    研究人员推出了一种新颖的并行草稿模型DNeo,旨在提高LLM推理的速度和质量。DNeo通过引入一个保留先前被拒绝提案信息的工作内存,解决了现有特征编码机制的局限性。这种方法结合了2抽头因果卷积和仅前缀交叉注意力等其他增强功能,使DNeo在不影响生成质量或草稿器占用的情况下,实现了比当前最先进的DFlash-2快1.3倍的生成速度。