FacEDiT

FacEDiT框架通过面部运动填充实现说话头视频编辑

研究人员推出FacEDiT，一个新颖的框架，通过专注于面部运动填充来编辑说话头视频。该方法将视频编辑视为一项自监督任务，其中被遮蔽的面部运动从语音和周围环境中重建。FacEDiT旨在处理局部编辑，如插入、删除和替换，同时保留身份并确保平滑过渡。附带的FacEDiTBench基准为此任务提供了标准化的评估，实验证明了该模型在生成准确、与语音对齐的编辑方面的有效性。