PulseAugur
实时 10:14:16
English(EN) Sekai2: From World Exploration to Interactive World Modeling

发布Sekai2数据集,用于交互式AI世界建模

研究人员推出了Sekai2,这是一个用于训练AI世界模型的新型大规模视频数据集。该数据集包含超过128,000个片段,总计2,826小时,收集自113个国家的10,428个视频。Sekai2独特地提供了同步的摄像机轨迹和详细的分层注释,将主体运动、环境动态和场景内容分离开来。一个关键特性是包含了982个全景序列,这些序列在不同时间和视角下会重新访问同一地点,这对于开发能够学习持久场景表示和长期空间记忆的AI至关重要。 AI

影响 能够训练能够进行长时生成和相机控制的AI世界模型,推动交互式AI的发展。

排序理由 该条目描述了一个为AI训练发布的新数据集及研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

发布Sekai2数据集,用于交互式AI世界建模

报道来源 [1]

  1. arXiv cs.CV TIER_1 English(EN) · Kang He, Wenshuo Peng, Zihui Gao, Jiaming Tan, Kaipeng Zhang, Yongtao Ge ·

    Sekai2:从世界探索到交互式世界建模

    arXiv:2608.09449v1 Announce Type: new Abstract: Video world models must capture how scenes evolve over time and across viewpoints. Training them for long-horizon generation and camera control therefore benefits from long videos paired with camera trajectories and temporally groun…