Action Forcing

新方法利用自我运动训练无监督视频中的世界模型

研究人员开发了一种名为“Action Forcing”的新颖方法，通过恢复自我运动基来使用无监督视频数据训练世界模型。该技术利用像素位移上的主成分分析，直接从无标签视频中提取油门和偏航等基础控制信号。该方法旨在克服现有方法需要昂贵的手动标注或仪器化平台的局限性。该研究还引入了超越传统视频生成度量的新世界模型评估指标，评估可控性、合理性和几何完整性。