SAF3R

SAF3R框架通过动态稀疏注意力提升三维重建Transformer的效率

研究人员推出SAF3R，一个旨在提高前馈三维重建（F3R）Transformer效率的新框架。该新方法解决了F3R Transformer中跨视图全局注意力二次复杂度引起的计算瓶颈，尤其是在处理长图像序列时。SAF3R采用一种无需训练的动态稀疏注意力机制，结合离线头分析和高效的在线适应策略，以动态匹配输入依赖的注意力行为。实验表明，SAF3R在保持相机姿态估计和三维重建质量的同时实现了显著的稀疏性，从而带来了显著的端到端加速。