LCM-LoRA

音乐家使用 Stable Diffusion 和 ControlNet 创建实时音乐视频

一位音乐家使用本地设置创建了一个实时的、音频响应式的音乐视频，该设置结合了带有 LCM 和深度 ControlNet 的 Stable Diffusion 1.5。该过程包括拍摄素材、分析音频以实现实时响应，然后应用 AI 传递来转换每一帧。AI 生成使用提示来创建带有 Madhubani 图案填充的日本水墨画笔触轮廓，并采用混合技术来创造闪烁效果。