SpecWM

新的SpecWM框架使用频谱对齐改进世界建模

研究人员推出了一种新的世界建模框架SpecWM，该框架使用频谱表示学习来指导模型保留哪些信息。通过指定观测值之间的期望关系（通过目标相似性核），SpecWM训练编码器在其嵌入几何中重现这些关系。这种方法可以明确控制从表示中可恢复的物理量，并在OGBench Cube、OGBench Scene和CALVIN等各种基准测试中规划成功率方面显示出显著的改进。