Fabio Francisco Oberweger

JEPA世界模型适配点云规划

研究人员探索了联合嵌入预测架构（JEPA）世界模型在几何观测（特别是点云）中的应用，以实现用于控制的潜在空间规划。他们适配了三种典型的JEPA设计，发现所有三种模型都能在不崩溃的情况下进行规划，其中分布先验模型表现与基于图像的对应模型相当，而在受控比较中，动作敏感模型取得了最强的结果。研究表明，物体位置可以从点云中高度解码，并且注意力机制专注于移动的点，这有助于模型的成功。