Spherical RoPE

SpheRoPE框架实现零样本360度全景生成

研究人员开发了SpheRoPE，一个用于生成360度全景图像和视频的新框架。这种零样本、无训练的方法将球形先验注入预训练的扩散Transformer中，在无需优化的前提下克服了拓扑约束。SpheRoPE利用Spherical RoPE编码球形流形数据，并使用Semantic Distortion无分类器引导来控制几何形状，使其能够泛化到各种骨干网络和生成模式。