Alejandro Magaña

PIXIE框架实现未知对象的零样本6D姿态估计

研究人员开发了PIXIE，一种新颖的零样本框架，仅使用无纹理的3D模型对未知对象进行6D姿态估计。该方法从采样视角渲染合成的深度图和法线图，并通过预训练的跨模态特征匹配器将其与查询图像进行匹配。PIXIE仅依赖几何形状，对光照和纹理变化具有鲁棒性，并且其对应关系过滤能有效处理装配缺陷或损坏引起的几何偏差。该框架在无需对象特定训练的情况下，在无纹理对象上取得了最先进的结果，并在包含装配缺陷、纹理变化和遮挡的新数据集上得到了验证。