PulseAugur
实时 12:07:03
English(EN) Text Dictates, Music Decorates: Energy-based Attention for Editable Dance Motion Generation

AI模型STREAM可根据文本和音乐生成可编辑的舞蹈动作

研究人员开发了STREAM,一个新的人工智能模型,旨在根据文本和音乐生成可编辑的舞蹈动作。与之前存在模式崩溃问题的模型不同,STREAM使用解耦的扩散Transformer来保持用户对编舞的控制,同时使动作与音乐节奏保持一致。该模型采用了基于文本结构的自适应层归一化和新颖的双模态基于能量的注意力模块来实现音乐集成。为了评估其性能,团队引入了交换评估协议和可编辑舞蹈分数,证明了STREAM作为编舞者协作伙伴的能力。 AI

影响 通过实现更可控和协作的舞蹈动作生成,增强了人工智能在创意领域的作用。

排序理由 发布了一篇详细介绍新AI模型和评估协议的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

AI模型STREAM可根据文本和音乐生成可编辑的舞蹈动作

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Seong Jong Yoo, Siyuan Peng, Felix Gu, Stratis Aloimonos, Cornelia Ferm\"uller ·

    Text Dictates, Music Decorates: Energy-based Attention for Editable Dance Motion Generation

    arXiv:2606.22726v2 Announce Type: replace Abstract: Choreographic motion generation poses unique challenges for AI, demanding precise semantic control over complex, temporally structured, and expressive full-body dynamics. While existing models can synthesize motion from music, t…