Mobjaverse

TopoCap框架可将任何3D角色从视频中动画化

研究人员开发了TopoCap，一个新颖的框架，用于从单目视频生成可适应任何骨骼结构的动画。该系统学习了一个通用的运动流形，将运动动力学与特定拓扑分离开来。它利用图CVAE和条件流匹配从视觉输入预测拓扑无关的运动代码。该框架在Mobjaverse上进行了训练，这是一个包含超过5000个骨骼拓扑的大规模数据集，能够对各种3D角色进行零样本重定向。