PulseAugur
中
实时 08:06:55
实体 Systolic Linear Attention

Systolic Linear Attention

PulseAugur coverage of Systolic Linear Attention — every cluster mentioning Systolic Linear Attention across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_342263 ·

    新型Systolic Linear Attention层提升TPU性能

    研究人员开发了Systolic Linear Attention (SLA)，一种针对Google TPU优化的新型注意力层。与针对GPU调优的现有gated delta attention层不同，SLA旨在利用TPU的宽矩阵单元，通过利用更多的矩阵块和减少瓶颈来提高效率。这种优化带来了显著的速度提升，SLA层在TPU v7x上的运行速度比现有的KDA内核快1.6倍至2.5倍。