PulseAugur
实时 04:06:39
Deutsch(DE) ViDS: Video Diffusion Shader using 3D Face Tracking

新的ViDS系统使用3D面部追踪进行逼真的肖像动画

研究人员开发了ViDS,一种新颖的视频扩散着色器,它利用3D面部追踪来创建逼真且保留身份的肖像动画。该系统从参考图像中重建3D可变形模型(3DMM)网格,并使用驱动视频中的表情和姿势数据对其进行动画处理。ViDS采用视频扩散模型作为神经着色器,利用3DMM法线贴图中的密集几何线索生成逼真的动画,从而保持原始外观和身份。与以前的方法相比,该方法在表情和姿势控制方面有所改进,并且自回归扩散采样过程增强了生成片段之间的一致性。 AI

影响 这项研究可能为创建逼真的数字头像和通过个性化动画增强视频内容提供更复杂的工具。

排序理由 该集群描述了一篇详细介绍新肖像动画方法的最新研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的ViDS系统使用3D面部追踪进行逼真的肖像动画

报道来源 [1]

  1. arXiv cs.CV TIER_1 Deutsch(DE) · Wenbo Ji, Davide Davoli, Zhe Chen, Liam Schoneveld, Matthias Nie{\ss}ner, Jiapeng Tang ·

    ViDS:使用3D面部追踪的视频扩散着色器

    arXiv:2607.24124v1 Announce Type: new Abstract: We introduce ViDS, a Video Diffusion Shader that leverages 3D face tracking for expressive and identity-preserving portrait animation. We first reconstruct the identity-specific 3DMM mesh from the reference image, and then animate i…