Relation-Orbit

新的Relation-Orbit方法增强了VLM空间声明的验证能力

研究人员开发了一种名为Relation-Orbit的新方法，用于提高视觉语言模型（VLM）在验证涉及空间关系（如左右区分）的声明时的准确性。该技术聚合了从水平反射等干预中获得的似然度量，以创建更强大的验证信号。在VSR和GQA等数据集上，使用包括LLaVA-1.5在内的各种冻结VLM进行的评估表明，Relation-Orbit在受控风险水平下的覆盖率方面优于现有基线。