Wan2.2
PulseAugur coverage of Wan2.2 — every cluster mentioning Wan2.2 across labs, papers, and developer communities, ranked by signal.
8 天有情绪数据
-
新的Web UI支持在低显存GPU上进行AI图像生成
一个名为LiteUI-Studio的新开源Web UI已被开发出来，可以在只有6GB或8GB显存的显卡上运行特定的AI图像生成模型，包括LTX2.3、Wan2.2-A14B和Flux.2-Klein-9B。该工具使用ComfyUI作为其后端，旨在提供一个轻量级的界面，无需复杂的节点设置。它支持加载微调模型和LoRA，在8GB显存上进行Flux2文本到图像任务的典型生成时间约为30秒，尽管目前它存在一些限制，例如缺少IPAdaptor和…
-
LanPaint 集成 Krea2 Turbo 以增强扩散模型修复
LanPaint 是一款通用的图像修复和外绘工具，现已支持 Krea2 Turbo。Krea2 Turbo 是一个快速的文本到图像模型，具备 LoRA 和提示增强功能。此次集成使用户能够通过加载图像、绘制蒙版和编写提示来轻松执行图像修复。LanPaint 旨在与各种扩散模型配合使用，特别是那些可能缺乏专用修复变体的新型模型，同时也支持 Ideogram4、Flux2 Klein、Anima、Z-image、Qwen Image Edi…
-
Reddit 用户分享两年 Stable Diffusion 工作流合集
一位 Reddit 用户分享了他们两年间积累的 Stable Diffusion 工作流的广泛合集，并声称这些工作流仍然有效。他们强调了 LoRA（低秩适配）作为优化图像生成过程的宝贵工具的效用。
-
用户寻求为Wan2.2视频添加带唇同步的角色声音，要求不损失质量
Reddit上的用户正在寻求方法，为使用Wan2.2生成的视频添加带唇同步的角色声音，同时不降低原始视频质量。使用InfiniteTalk和LTX2.3等工具的尝试导致视频质量严重下降或原始素材被改变。虽然可以无问题地添加背景音频，但如何在保持初始视频完整性的同时集成角色声音和唇同步仍然是一个挑战。
-
AmapAI发布DreamX-World 1.0，增强视频和交互生成能力
阿里巴巴集团旗下的AmapAI团队发布了其新模型DreamX-World 1.0，该模型构建于其Wan2.2基础之上。该模型能够生成一分钟的连续序列并支持实时交互，表明在视频和世界建模的长序列生成及交互生成质量方面取得了进展。
-
AI 工具组合创作叙事性音乐视频“Gently I'm Free”
一部名为“Gently I'm Free”的新音乐视频，结合使用了 Wan2.2 FFLF、Lightweight VACE Clip Joiner 和 InfiniteTalk 等 AI 工具创作而成。创作者专注于叙事和镜头控制，并吸取了以往项目的经验来增强故事性。该项目使用了 WAN2.2 模型以获得一致的输出，创作者计划接下来尝试使用新的 Bernini 模型。
-
ACE ROBOTICS 的 Kairos 世界模型树立了新的具身人工智能基准
ACE ROBOTICS 发布了其 Kairos 世界模型，该模型在四个主要的具身人工智能基准测试中取得了最高排名：RoboTwin 2.0、LIBERO-Plus、WorldModelBench Robot 和 DreamGen。该模型采用了一种新颖的统一架构，用于多模态理解、生成和预测，解决了现有视频生成模型的局限性。Kairos 已向行业开源。
-
SpecLoR 方法增强文本到视频生成连贯性
研究人员推出了一种名为 SpecLoR 的新方法，以提高文本到视频生成的连贯性并减少伪影。该技术解决了潜在 ODE 采样中的数值误差所带来的问题，这些误差通常会导致生成视频在时空上不一致。SpecLoR 通过前瞻性地估计干净的潜在状态，然后在频域中校正其频谱幅度，同时保留相位信息来工作。这种方法有效地绕过了噪声，避免了破坏局部几何结构，在几乎没有计算开销的情况下显著提高了运动连贯性。
-
AI艺术项目“废弃之地”使用Stable Diffusion和Suno
一位Reddit用户分享了一个题为“废弃之地 - 01”的创意项目，该项目结合了AI生成的图像和音乐。该项目利用Stable Diffusion 1.5进行初始图像创作，随后使用了Wan2.2的图像到视频技术。伴随的音乐也是使用AI工具Suno生成的。
-
用户分享“RetroPunk”AI生成艺术作品，寻求模型建议
一位Reddit用户分享了一张题为“RetroPunk”的生成图像和视频，该作品使用Stable Diffusion 1.5和wan2.2进行图生视频转换。尽管用户承认其不完美和现代美学，但他们对生成内容的氛围表示个人满意。他们还询问了LTX2.3能否产生更好的结果，并提到使用RTX 4080进行本地生成。
-
ComfyUI 增加了高级潜在空间插值节点
一位开发者为 ComfyUI（Stable Diffusion 的一个流行界面）创建了新的节点，实现了黎曼测地线插值。与传统的线性或 SLERP 技术相比，这些节点提供了在潜在空间之间进行插值的一种更复杂的方法。这些新工具可在 GitHub 上找到，并通过 ComfyUI Manager 安装，包括用于计算弯曲潜在空间上最短路径的函数，以及使用与 WAN2.2 兼容的方法来指导插值。
-
NAVA视频生成模型初显成效
一款名为NAVA的新的视频生成模型已进行测试，其结果超出了预期。该模型集成了用于图像创建的wan2.2和用于语音同步的LTX音频VAE。创作者计划在几天内分享更多细节并公开该模型。
-
AI工具用于为虚构产品创建概念视频
一位Reddit用户分享了“Meadow Oats 风味包”的创意概念，这是一种他们希望存在但虚构的产品。为了将他们的想法变为现实，他们使用包括WAN2.2、AceStep、LTX2.3和用于语音生成的Chatterbox TTS在内的各种AI工具创建了一个宣传视频。r/StableDiffusion上的帖子展示了用户对这种产品的渴望以及他们利用AI进行可视化创新的方式。
-
Stable Diffusion 用户就 DaSiWa 与 Remix 视频模型应用展开辩论
Reddit 上的一场讨论探讨了在 Stable Diffusion 生态系统中，DaSiWa 和 Remix 这两个视频生成模型的最佳使用场景。用户们正在辩论这些模型是否专门针对动漫等特定类型，或者它们是否具有更广泛的通用性。对话中提到了 LoRA GalaxyACE 与 LTX2.3 的有效性，并对其与更新的 WAN2.2 模型兼容性表示期待。
-
AI-Toolkit 强制完整模型下载，令硬件受限用户沮丧
一位 Reddit 用户在使用 AI-Toolkit 软件时遇到问题，该软件强制用户下载完整的大型模型，尽管他们已经本地存储了较小的优化版本。用户的系统拥有 16GB VRAM 和 32GB RAM，无法处理巨大的完整模型，导致崩溃。他们正在寻找一种方法来配置 AI-Toolkit，使其能够识别并使用现有的本地优化模型，而不是尝试下载完整版本，尤其是在训练 LoRAs 时。
-
Stable Diffusion 用户寻求 LoRA 训练以实现身份一致性
一位 Reddit 用户正在寻求关于如何使用 Stable Diffusion 的 Wan2.2 模型在 AI 生成的视频中保持面部身份一致性的建议。他们遇到了身份漂移问题，并正在探索训练 Wan2.2 的角色 LoRA 的有效性。该用户还询问了什么构成一套良好的面部身份训练图像，以及应以何种余弦相似度指标为目标以避免身份漂移。
-
新的AI研究聚焦于通过量化和Token剪枝提升模型效率
研究人员正在开发新的方法，通过量化和Token剪枝来提高AI模型的效率。一种名为PeRQ的方法，通过在旋转前重新分配激活质量来增强训练后量化，从而显著提高了Llama3 1B等模型的准确性。另一种方法OccamToken，通过使用寄存器锚定的相对证据测试，有效地剪枝视觉语言模型（VLM）中的视觉Token，在保持准确性的同时减少了Token数量。此外，Clark Hash提供了一种无状态编解码器，用于紧凑的神经嵌入存储，以最小的准确性…
-
新研究提升视频生成控制力和效率
研究人员正在开发新方法来改进视频生成模型，重点关注控制、效率和质量。一种名为LA-LQR的方法使用最优控制来引导视频生成模型，在保持视觉保真度的同时减少不期望的内容。另一个研究领域是通过蒸馏和低比特量化来压缩大型视频扩散模型（如Wan2.2），使其更易于部署。此外，新的框架正在出现，为视频生成提供显式的3D控制和感知，超越2D投影，以更好地捕捉复杂的场景动态和人物运动。
-
ByteDance发布Lance，一个统一的多模态AI模型
ByteDance发布了Lance，一个开源的多模态AI模型，能够在单一框架内理解、生成和编辑图像和视频。这个轻量级模型只有30亿个活跃参数，在各种基准测试中表现强劲，并且可以在仅需40GB VRAM的本地设备上运行。Lance采用分阶段多任务方法从头开始训练，并迅速获得关注，出现在Hugging Face的趋势模型列表中。
-
研究人员开发AesRM，通过专家反馈提升视频美感
研究人员开发了AesRM，这是一系列旨在提升生成视频美感的新奖励模型。该系统将视频美感分解为视觉美感、视觉保真度和视觉合理性三个维度，包含15个具体标准。AesRM利用来自2500个视频对数据集的专家反馈来训练模型，这些模型能够预测偏好并生成可解释的推理。模型通过包括原子美感能力学习和强化学习在内的三阶段过程进行训练，与现有方法相比，表现出更高的性能和鲁棒性。此外，AesRM还被用于增强视频生成模型Wan2.2，带来了显著的美感提升。