Image as Action Control

新的iMac范式使用图像作为动作，实现高级机器人控制

研究人员推出了一种新的机器人控制范式iMac（Image as Action Control，图像即动作控制），该范式利用原始视觉图像作为具身世界模型中的动作表示。这种方法超越了传统的低维动作向量，后者通常在表达能力和泛化性方面存在不足。iMac将连续操作表述为基于图像的动作令牌，内在地捕捉空间意图和物理动力学，与现有方法相比，在预测准确性和任务成功率方面表现更优。