研究人员推出了 Sparkle,这是一个旨在改进指令引导视频背景替换的新数据集和基准。该数据集包含约 140,000 对视频,涵盖五个主题,解决了高质量训练数据稀缺的问题,而这种稀缺性曾阻碍了 Kiwi-Edit 等先前模型的发展。Sparkle 采用新颖的解耦前景和背景引导合成流程,实现了更自然、时间上更一致的场景切换。实验表明,在 Sparkle 上训练的模型在新的 Sparkle-Bench 和 OpenVE-Bench 上均优于现有基线。 AI
影响 增强了视频编辑工具的功能,有望改善电影和广告内容创作。
排序理由 这是一篇介绍用于视频背景替换的新数据集和基准的研究论文。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →