两篇新研究论文提出加速 Diffusion Transformers (DiTs) 的方法,DiTs 在高分辨率图像和视频生成方面计算量很大。第一篇论文 Shiva-DiT 提出了一种基于残差的可微分 top-k 选择方法,实现了端到端可学习和确定的 token 数量,在 SD3-Medium 上实现了高达 1.54 倍的速度提升,同时保持了可比的保真度。第二篇论文 BaryCache 提出了一种使用重心外插器进行训练的加速技术,该外插器可以预测采样步数,在内存使用和感知质量之间提供了有利的权衡,速度提升高达 3.30 倍。 AI
影响 这些方法可以显著降低使用 Diffusion Transformers 生成高分辨率图像和视频的计算成本和延迟。
排序理由 两篇在 arXiv 上发表的学术论文,提出了加速 Diffusion Transformers 的新颖方法。
- arXiv
- BaryCache
- Barycentric Extrapolator
- DagsHub
- Diffusion Transformer
- Diffusion Transformers
- Hugging Face
- Runge phenomenon
- Flux
- Jiaji Zhang
- PixArt
- SD3-Medium
- Shiva-DiT
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →