实体
StreamChar
StreamChar
PulseAugur coverage of StreamChar — every cluster mentioning StreamChar across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
时间线
- 2026-05-25 research_milestone Researchers published a paper detailing the StreamChar framework for real-time streaming character audio-video generation. 来源
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
StreamChar框架支持实时音视频角色生成
研究人员推出StreamChar，一个用于在实时流式场景中生成角色音视频的新型框架。该系统将长视域编排与短窗口音视频去噪解耦，利用基于LLM的编排器处理帧对齐音频条件，并使用联合音视频DiT进行局部去噪。StreamChar采用两阶段蒸馏管线以实现高效部署，并结合了进度感知指针和接收块内存等机制，以减轻字幕-音频不对齐和视觉漂移问题，在单个H100 GPU上实现了实时性能。
-
新框架支持实时流式音视频生成和旁白
研究人员开发了两个新框架 StreamChar 和 FlowNar，专为长视频的实时音视频生成和旁白设计。StreamChar 利用基于 LLM 的编排器和联合音视频扩散 Transformer 来实现高效的实时角色动画生成。FlowNar 通过采用动态上下文管理和新颖的 Cross Linear Attentive Memory 模块来解决流式视频旁白的扩展性挑战，以保持有限的计算复杂性并提高旁白质量。