实体 Dylan Forde

Dylan Forde

PulseAugur coverage of Dylan Forde — every cluster mentioning Dylan Forde across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_245572 · Sep 10 · 04:00

新的 Sinkhorn 注意力方法优化 TPU 上的长上下文处理

研究人员开发了一种新颖的注意力机制，称为块状可微分 Sinkhorn 注意力（Block-Wise Differentiable Sinkhorn Attention），旨在高效处理张量处理单元（TPU）上的长上下文。该方法使用尾部精炼代理（tail-refinement surrogate）来实现精确微分，优化了注意力计算的计算成本。该方法已在 TPU v6e-8 硬件上进行了测试，在合成任务上展示了改进的性能，并在 Pfam 数据…