Adaptive Spherical Attention (AdaSpA)

受生物启发的Transformer增强全景图像分割

研究人员开发了AdapToPASS，这是一种新颖的受生物启发的球形Transformer，用于全景语义分割（PASS）。这种新架构自适应地模拟上下文和几何歧义，提高了对未见过的球形变换的鲁棒性。AdapToPASS包含自适应球形注意力（AdaSpA）块，该块根据局部歧义动态调整注意力，并使用双焦点球形表示来平衡视野和分辨率。该方法在室内和室外数据集上均显示出优于现有最先进技术的性能，在具有挑战性的变换条件下取得了显著的提升。