Varun Varma Thozhiyoor

新的Principia基准揭示了视频AI模型中重大的物理推理差距

一个名为Principia的新基准已被开发出来，用于评估视频生成模型在物理推理方面的能力，特别关注牛顿物理学。该基准评估场景中物体之间的关系一致性，这与相机校准和帧率无关，解决了先前评估方法的局限性。研究发现，当前最先进的视频生成器在物理推理方面存在显著差距，尽管在VBench等其他基准上表现良好，但在Principia上的得分均未超过0.42。视觉语言模型也难以检测物理违规，这表明需要改进AI对物理定律的理解。