PulseAugur
实时 07:42:22
实体 ClusterAttention

ClusterAttention

PulseAugur coverage of ClusterAttention — every cluster mentioning ClusterAttention across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_223283 ·

    ClusterAttention 在无需训练的情况下加速 AI 模型

    研究人员推出了一种名为 ClusterAttention 的新方法,旨在加速 AI 模型中的双向注意力层,而无需额外的训练。该技术采用一种快速的递归聚类方法,能够适应每个注意力头中键和查询的特定几何形状。ClusterAttention 已在大型表格数据上展示了显著的加速效果,将 TabPFN-3 的速度提高了两到六倍,同时保持了超过 99% 的密集注意力精度。它还通过实现更接近密集注意力的输出,并与现有的专用方法相比提供更大的加速,…