研究人员推出了一种新颖的对应模型 Flow Any Scene Transformer (FAST),该模型旨在实现精确的图像匹配。FAST 利用单视图视觉基础模型的洞察,特别是它们的查询-键投影,来初始化一个基于 ViT 的匹配器。这种方法使得模型能够随着单视图模型的进步而扩展,而无需专门的成对中心预训练。FAST 采用零参数重布线策略将自注意力层转换为交叉注意力,以实现视图间的交互,并在一个包含 600 万对图像的数据集上进行了训练。实验表明,FAST 在骨干模型大小和训练数据方面取得了最先进的性能和良好的扩展性。 AI
影响 引入了一种可扩展的方法来实现精确的图像对应匹配,有可能提高需要密集二维位移估计的应用的性能。
排序理由 该集群描述了一篇关于新颖模型架构的最新研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →