PlayGen2

新AI模型学会创建具有详细状态跟踪的可玩3D世界 · 跟踪2个来源

研究人员开发了PlayGen2，一种新颖的实时交互式世界模型，它将3D状态演化与神经渲染分离，以创建可玩的世界。该模型维护持久的世界记忆，包括静态几何和动态实体状态，从而实现几何感知的玩家运动和交互。PlayGen2在消费级硬件上实现了低延迟，并通过模型组合在新的地图和多人游戏功能上实现了零样本部署。此外，还引入了一个名为GameVerse的新数据集，其中包含分钟级的游戏序列和详细的事件对齐注释，以改进长时程交互世界建模。