English(EN) OnlyAct: Extracting Action Representations from Foundation Models for World Models

新方法从基础模型中提取动作表征用于世界模型

作者 PulseAugur 编辑部 · [1 个来源] · 2026-11-11 05:00

研究人员开发了一种名为OnlyAct的新方法，用于从基础模型中提取动作表征以用于世界模型。该方法利用了V-JEPA 2基础模型，该模型通过大规模视频预训练已包含大量动作信息。OnlyAct使用无标签的对比适应框架将动作信息与场景细节分离开来，从而提高了泛化能力和表达能力。该方法已在多个基准测试中得到评估，与现有的无标注方法相比，在动作表征和将演示动作迁移到新场景方面表现更优。 AI

影响这项研究通过利用现有基础模型进行动作表征，有望提高视频世界模型的效率和泛化能力。

排序理由这是一篇研究论文，详细介绍了一种从基础模型中提取动作表征的新方法。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。我们如何撰写摘要 →

本文如何被排名

Signal score: 15 / 100; Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket: Tool; 这是一篇研究论文，详细介绍了一种从基础模型中提取动作表征的新方法。[lever_c_demoted from research: ic=1 ai=1.0]
Source corroboration: Single-source cluster; Only one publisher covered this so far. Single-source stories can still rank when the publisher is high-authority, but they lack cross-source corroboration.
Topics: paper, model release; Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance: High; Clearly on-topic for AI-industry coverage.
Story freshness: Breaking (< 6h); Fresh story with cross-source coverage still developing. Ranking may shift as more sources report.

完整方法见我们的编辑标准。

报道来源 [1]

arXiv cs.CV TIER_1 English(EN) · Runjia Li, Minghao Chen, Junyu Xie, Philip Torr, Andrea Vedaldi, Tomas Jakab · 2026-11-11 05:00

OnlyAct：从基础模型中提取动作表征以构建世界模型

arXiv:2611.14420v1 Announce Type: new Abstract: Video world models promise general-purpose interactive simulators, but their training is limited by action supervision: action labels are scarce, fragmented across incompatible specifications, and do not scale with the unlabeled vid…

本文如何被排名

报道来源 [1]

OnlyAct：从基础模型中提取动作表征以构建世界模型

相关实体

相关话题