PulseAugur
中
实时 20:02:19

以人为中心的视频在具身AI预训练中优于机器人数据

作者 PulseAugur 编辑部 · [4 个来源] ·

研究人员发现，与传统的遥操作机器人轨迹相比，以人为中心的视频可以作为一种更有效且成本效益更高的数据源，用于具身基础模型的预训练。研究表明，在过滤后的以人为中心的视频数据上训练的模型，在动作预测和任务执行方面取得了优于使用真实机器人数据训练的模型。这表明一种新范式，即使用多样化的人类视频数据进行初始预训练，然后用一小部分标记的机器人数据进行适应，以实现精确的动作对齐。 AI

影响 这项研究提出了一种更具可扩展性且成本效益更高的方法来训练具身AI代理，有可能加速其在现实世界应用中的开发和部署。

排序理由 该集群包含详细介绍AI新发现和方法的 ist 研究论文，特别是关于具身AI模型预训练的数据源。

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 4 个来源。 我们如何撰写摘要 →

以人为中心的视频在具身AI预训练中优于机器人数据

报道来源 [4]

  1. Hugging Face Daily Papers TIER_1 English(EN) ·

    HumanScale：以自我为中心的真人视频可优于实体预训练的真实机器人数据

    Egocentric human video can effectively replace teleoperated robot trajectories for embodied model pretraining, achieving better performance with reduced data collection costs.

  2. Hugging Face Daily Papers TIER_1 English(EN) ·

    ACE-Ego-0：统一以自我为中心的人类和机器人数据用于VLA预训练

    A unified Vision-Language-Action pretraining framework leverages heterogeneous data sources including human egocentric videos and robot trajectories through a reliability-aware training approach that improves performance on embodied AI tasks.

  3. arXiv cs.CV TIER_1 English(EN) · Juncheng Ma, Jianxin Bi, Yufan Deng, Xuanran Zhai, Kewei Zhang, Ye Huang, Bo Liang, Shukai Gong, Jiankai Tu, Xiaotian Tang, Jiaxin Li, Kaiqi Chen, Duomin Wang, Yuqi Wang, Bingyi Kang, Eric Huang, Zhiyang Dou, Zhen Dong, Enze Xie, Wojciech Matusik, Tat-Se… ·

    HumanScale：以自我为中心的真人视频可优于实体预训练的真实机器人数据

    arXiv:2606.20521v1 Announce Type: new Abstract: Embodied foundation models are expected to benefit from data scaling like large language models, but face a much tighter data bottleneck. Teleoperated real-robot trajectories remain the dominant pretraining source due to their preci…

  4. arXiv cs.CV TIER_1 English(EN) · Daquan Zhou ·

    HumanScale：以自我为中心的视频可优于实体预训练的真实机器人数据

    Embodied foundation models are expected to benefit from data scaling like large language models, but face a much tighter data bottleneck. Teleoperated real-robot trajectories remain the dominant pretraining source due to their precise action supervision and embodiment alignment, …

相关实体

相关话题