实体 LaCache

LaCache

PulseAugur coverage of LaCache — every cluster mentioning LaCache across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

0

90 天内 0

层级分布 · 90 天

主题

基础设施 1

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_155425 · Jul 21 · 14:47

LaCache 通过 token 缓存将 diffusion LLM 加速 1.3 倍

一种名为 LaCache 的新缓存技术已被开发出来，用于加速 diffusion 大型语言模型。该方法在去噪过程中缓存未更改的 token，从而在独立推理中实现 1.3 倍的速度提升。当与其他加速技术结合使用时，LaCache 可实现高达 40 倍的速度提升。