Muva

BEAT框架生成具有弹性音乐对齐功能的电影预告片

研究人员开发了BEAT，一个用于生成与音乐同步的电影预告片的新框架。BEAT通过采用一种适应音乐动态的弹性对齐方法，解决了现有方法的局限性，与僵化的一对一映射不同。该系统在一个代理管道中集成了音乐-视觉对齐编码器和动态规划算法。BEAT还引入了TrailerArena，一个用于评估预告片生成的新基准，在该基准上，它在镜头选择、排序和整体质量方面取得了最先进的成果。