CAIRN-MR

CAIRN模型推进多房间三维场景理解

研究人员推出CAIRN，这是一种新颖的拓扑感知大型多模态模型，用于理解复杂的多房间三维场景。与以往仅限于单房间的模型不同，CAIRN明确地推理物体关系和房间连通性。它通过集成图神经网络和学习到的房间令牌来实现这一点，从而实现尊重场景拓扑的层次化注意力。CAIRN在新推出的CAIRN-MR基准上进行了评估，在多房间任务上展示了比现有3D-LLM显著的性能提升。