LivePortrait
PulseAugur coverage of LivePortrait — every cluster mentioning LivePortrait across labs, papers, and developer communities, ranked by signal.
- 2026-07-05 product_launch A distilled version of the LivePortrait model was released, enabling real-time browser performance. 来源
1 天有情绪数据
-
新的Emo-LiveSync框架支持多样化角色的实时唇形同步
研究人员开发了Emo-LiveSync,一个新颖的框架,用于在包括风格化角色和非人类实体在内的多样化视觉风格中实现实时唇形同步。该方法基于LivePortrait模型,并采用一种蒸馏预训练视频到运动模型的知识以对齐音频信号的训练策略。Emo-LiveSync实现了高视觉保真度和准确的实时唇形同步,并独特地包含了一个用于显式情感表达操纵的表达控制门。
-
使用 Stable Diffusion 在 ComfyUI 中实现 Minimax 角色替换
一位用户在 ComfyUI 中使用 Minimax 模型成功实现了一种角色替换技术,该技术灵感来源于在热门视频片段中用不同角色替换人物的病毒式 TikTok 视频。用户利用了一个特定的 LoRA (MiniMax-H3-Character-Swap-LoRA) 来实现准确的性能迁移,并指出其效果优于尝试过的其他方法,但尚未达到 Seedance 的质量。该过程包括以 352x640 的分辨率和 8 步生成单帧,在 4090 GPU 上…
-
新数据库与基准解决照片级逼真头像指纹识别问题
研究人员推出了AVAPrintDB,这是一个旨在解决与照片级逼真会说话人脸头像相关的安全问题的新公开数据库。该数据库旨在改进头像指纹识别,这项任务侧重于识别两个头像视频是否来自同一操作者。AVAPrintDB利用三个最先进的头像生成器和视听语料库来模拟真实场景,包括自我重演和模仿企图。除了数据库,还提出了一个标准化的基准,整合了现有系统和基于Foundation Models(如DINOv2和CLIP)的新方法,以评估在各种条件下的头…
-
用户寻求本地化、开源视频木偶戏管线推荐
一位用户正在寻求关于构建完全本地化、开源且自托管的视频木偶戏管线的推荐。他们目前正在使用 Kling AI 和 Nano Banana 等云端工具,但希望迁移到一个在自己硬件上运行的系统。目标是执行自动换脸、3D 动作和表情重定向(包括唇形同步和微表情),以及高分辨率视频拼接。用户正在征求关于最佳的开源面部重定向和换脸模型的建议,以及是使用 ComfyUI 还是独立的 Python 脚本来构建管线。
-
LivePortrait 模型蒸馏以实现 25fps 浏览器性能
LivePortrait 模型的一个蒸馏版本已被开发出来,显著提高了其在实时应用中的性能。新版本可以直接在网页浏览器中以每秒 25 帧的速度生成帧,相比原始 ONNX 版本每帧需要 30 秒,这是一个巨大的飞跃。虽然目前蒸馏模型的质量被描述为“一般般”,并且因肖像而异,但它代表了朝着更易于访问和更高效的 AI 驱动面部动画迈出的有希望的一步。
-
AI创作者绕过15秒视频限制,制作更长的娃娃对口型视频
创作者正在寻找方法来制作超过Kling AI和Google Omni等工具通常施加的15秒时长限制的AI生成娃娃对口型视频。这是通过高级工作流程实现的,可能涉及ComfyUI与AnimateDiff或LivePortrait的结合,以在没有明显剪辑的情况下保持提示连贯性和平滑的摄像机运动。用户正在寻求关于这些技术的建议,以复制更长、更连贯的AI生成视频内容。