实体
MotionGPT
MotionGPT
PulseAugur coverage of MotionGPT — every cluster mentioning MotionGPT across labs, papers, and developer communities, ranked by signal.
总计 · 30天
0
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 3 条
-
U-Mind框架支持单一模型实现实时文本、语音和动作生成
研究人员开发了U-Mind，一个专为实时多模态交互设计的新型统一框架。该框架旨在使单一自回归模型能够同时处理和生成文本、语音和动作，并整合推理能力。U-Mind通过采用两阶段训练方法和以文本为中心的解码策略，解决了在整合语音和动作生成时保持高级推理的挑战。
-
合成运动数据扩展了生成式建模能力
研究人员开发了一个框架，通过利用大规模合成运动数据来增强人体运动生成。该方法解决了现有动作捕捉数据集的局限性，这些数据集通常缺乏多样性，并且无法代表复杂或罕见的动作。通过集成一种新颖的数据生成管道和重新设计的VQ-VAE分词器，该系统扩展了运动表示空间，能够更好地捕捉运动原语，并在文本到运动生成等任务中提高性能。研究结果表明，运动表示的表达能力，而不仅仅是模型架构，是推进人体运动合成的关键。
-
复旦大学团队推出STI-WM机器人世界模型
复旦大学团队发布了STI-WM，一个专为机器人设计的时空统一世界模型。该模型旨在通过整合基于物理的约束和端到端集成，克服当前视觉-语言-动作模型的局限性，从而实现更强大的真实世界机器人控制。模型背后的公司Moshine Intelligence已获得巨额融资，并正与行业领导者合作，将其技术应用于各种机器人场景。