Procrustes distance

新指标“几何稳定性”被引入用于神经网络表示

研究人员引入了“几何稳定性”作为评估神经网络表示的新指标，以补充现有的诸如CKA和Procrustes距离等方法。这个名为Shesha的新指标量化了表示结构的恢复可靠性，填补了当前仅测量相似性的分析方法的空白。对数千种编码器配置和包括DINOv2在内的众多视觉模型的实验表明，几何稳定性可以与表示相似性区分开来，表明它捕捉了学习表示的一个独特且重要的属性。