Isekai3D SDG

新平台为AI研究生成合成3D游戏数据

研究人员开发了Isekai3D合成数据生成（SDG）平台，该平台旨在为各种AI研究应用创建合成3D游戏数据。该平台利用Unreal Engine和两阶段工作流程：首先，它模拟游戏玩法并记录世界状态、角色动作和摄像机数据；其次，它重放这些模拟以捕获视觉输出（如图像和深度图）以及对齐的元数据。这种方法允许从单一模拟中生成多个数据变体，并通过直接以上传训练友好格式的数据来简化流程。