SkyJEPA

SkyJEPA模型实现零样本仿真到现实的四旋翼飞行器控制

研究人员开发了SkyJEPA，一种用于学习四旋翼飞行器控制的远程世界模型的新方法。这种JEPA风格的模型在潜在空间中运行，并包含一个受物理学启发的探测器，将冻结的潜在状态映射到可解释的状态，从而实现基于物理的预测。该系统设计用于嵌入式硬件上的实时控制，并利用自动数据集生成来减少对现实世界数据收集的依赖。实验表明，该模型具有准确的预测、强大的零样本仿真到现实迁移能力和强大的泛化能力。