实体
WorldFlow
WorldFlow
PulseAugur coverage of WorldFlow — every cluster mentioning WorldFlow across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
2 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
WorldFlow模型通过大规模预训练联合预测视频和3D运动
研究人员推出了一种新颖的生成式世界模型WorldFlow，旨在联合预测未来的视频和3D轨迹。该模型利用了Transformer混合体骨干网络来同时处理这两种模态，并通过利用预训练的视频模型来增强物理动力学的预测能力。为了支持其开发和评估，WorldFlow在一个包含144万个样本的大型数据集上进行了训练，并使用新的WorldFlowBench基准进行了验证，该基准包含跨越不同领域的1678个样本。
-
新模型FloMo和WorldFlow可从视频预测3D运动
研究人员开发了FloMo和WorldFlow，两个专注于从视频预测3D场景运动和动作的独立模型。拥有50亿参数的FloMo模型，通过微调视频生成能力来预测3D场景流和动作令牌，证明运动预测比直接视频预测更能有效地实现机器人动作泛化。WorldFlow利用混合Transformer骨干网络，通过连续位移令牌联合预测未来的视频和3D轨迹，展示了改进的物理动力学预测能力，并显著降低了SpatialCog等基准测试的误差。