PulseAugur
实时 13:09:13
English(EN) Generalizable VLA Finetuning via Representation Anchoring and Language-Action Alignment

新的Anchor-Align方法提升VLA策略泛化能力

研究人员推出了一种名为Anchor-Align的新方法,通过解决标准行为克隆(BC)微调的问题来改进视觉-语言-动作(VLA)策略。BC微调可能会降低预训练视觉-语言模型(VLM)的泛化能力。Anchor-Align通过两个目标增强BC:视觉-语言锚定,它使用来自冻结VLM的蒸馏来保留表示;以及语言-动作对齐,它在同一观察下联合训练语言和动作预测。这种方法在真实机器人成功率以及在模拟和物理xArm7机器人上的各种扰动鲁棒性方面都显示出显著的改进。 AI

影响 通过提高视觉-语言-动作策略的泛化能力和鲁棒性来增强机器人控制。

排序理由 该集群包含一篇详细介绍VLA策略新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 Hugging Face Daily Papers 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的Anchor-Align方法提升VLA策略泛化能力

报道来源 [1]

  1. Hugging Face Daily Papers TIER_1 English(EN) ·

    通过表示锚定和语言-动作对齐实现可泛化的VLA微调

    Finetuning a pretrained vision-language model (VLM) on robot demonstrations via behavior cloning (BC) has become the standard recipe for vision-language-action (VLA) policies. However, BC finetuning progressively overwrites the pretrained representations that support visual and s…