研究人员开发了 LiveAnimate,一个能够实时生成稳定、长篇人类动画的新颖系统。该系统基于一个拥有140亿参数的视频 Diffusion Transformer 构建,采用了两阶段训练流程和独特的 Pose-Retrieval Sink Attention 机制,以在长时间内保持一致的外观和身份。这使得直播和虚拟化身等交互式应用成为可能,在高配 GPU 上实现了 19.63 FPS 的推理速度,并在三分钟基准测试中展示了极小的质量下降。 AI
影响 通过克服基于扩散的动画中的延迟和稳定性问题,实现了直播和虚拟化身等实时交互式应用。
排序理由 该条目描述了一篇关于实时人类动画新颖系统的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- Block-wise Self-Forcing Distillation
- Diffusion Transformer
- LiveAnimate
- NVIDIA H100
- Pose-Retrieval Sink Attention
- Reference-Anchored Teacher-Forcing Adaptation
- Static Sink
- Ulysses
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →