EgoFun3D

EgoFun3D框架从主体视角视频中建模交互式3D对象

研究人员推出了一种名为EgoFun3D的新框架，用于从主体视角视频中建模交互式3D对象。该方法侧重于使用结构化的“函数模板”来捕获物体部件之间的功能映射，例如旋钮如何控制燃烧器。该系统包含一个包含517个主体视角视频的带详细注释的数据集，以及一个包含分割、重建、关节估计和函数模板推理的四阶段流程。所提出的方法旨在生成可用于仿真的交互式3D对象，以解决具身AI研究中此类数据稀缺的问题。