研究人员推出MUGEN,一个新颖的统一框架,旨在实现高效的运动理解和生成。与依赖离散运动码本的先前方法不同,MUGEN利用从连续潜在槽中进行的一次抽取,消除了量化限制并提高了生成质量。这种方法允许单个自适应长度的自编码器压缩不同长度的运动,而语言模型生成的潜在变量可用于文本到运动生成和运动到文本理解任务。MUGEN在HumanML3D和SnapMoGen等基准测试中,在FID、检索精度、CIDEr和BLEU@4等各种指标上均展现出最先进的性能,同时显著降低了解码成本。 AI
影响 该框架有望加速开发更复杂的AI系统,这些系统能够理解物理环境中的人类行为并与之互动。
排序理由 该集群包含一篇详细介绍AI运动理解和生成新框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →