ImagiRep

新基准 ImagiRep 揭示 RGB 在空间推理方面的局限性

研究人员推出了 ImagiRep，这是一个旨在评估视觉世界模型空间推理能力的新基准。该基准使用跨越七种类型和两种设置的 922 个问题，提供 RGB 视图以及未观察到的状态的六种替代表示。研究发现，尽管想象中的 RGB 很常见，但它并不总是能带来准确的空间推理，而且不同的表示对于不同类型的问题更有效。为了解决这个问题，该团队开发了 GEARS，一种在测试时自适应选择表示的策略，其性能优于现有方法。