研究人员开发了LiveSync,一个旨在提高生成视频中音频驱动的唇同步的迭代自训练框架。该方法通过从真实视频创建伪配对数据来优化单个模型,模型在其中编辑嘴部运动,同时保留其他面部特征。优化后的模型在HDTF数据集上展示了领先的同步性能,并在AIGC-LipSync子集上取得了有竞争力的结果,同时保持了较低的推理延迟。 AI
影响 提高了AI驱动视频内容的唇同步生成质量和效率。
排序理由 详细介绍唇同步生成新框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →