FlowDance

AI模型FlowDance和SingDance生成逼真的音乐驱动歌舞视频

两篇新的研究论文FlowDance和SingDance，介绍了用于生成逼真歌舞视频的先进AI框架。FlowDance通过使用并行姿态和RGB流来创建与音乐同步的舞蹈视频，并为此任务构建了一个新数据集。SingDance则解决了更复杂的挑战，即生成一个人同时唱歌和跳舞的视频，它采用了一种新颖的方法，通过对音频、音乐和表演者（歌手或听众）的角色进行条件约束，来实现组合式零样本生成。