PulseAugur
实时 04:23:03
English(EN) SpheRoPE: Zero-Shot Optimization-Free 360 Panorama Generation with Spherical RoPE

SpheRoPE框架实现零样本360度全景生成

研究人员开发了SpheRoPE,一个用于生成360度全景图像和视频的新框架。这种零样本、无训练的方法将球形先验注入预训练的扩散Transformer中,在无需优化的前提下克服了拓扑约束。SpheRoPE利用Spherical RoPE编码球形流形数据,并使用Semantic Distortion无分类器引导来控制几何形状,使其能够泛化到各种骨干网络和生成模式。 AI

影响 这项研究为生成360度内容提供了一种更有效的方法,可能对虚拟现实和沉浸式媒体创作等领域产生影响。

排序理由 该集群描述了一篇详细介绍新图像生成方法的最新研究论文。

在 Hugging Face Daily Papers 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

SpheRoPE框架实现零样本360度全景生成

报道来源 [2]

  1. Hugging Face Daily Papers TIER_1 English(EN) ·

    SpheRoPE:无需优化即可进行零样本 360 全景生成的球形 RoPE

    A novel zero-shot framework injects spherical priors into pre-trained diffusion transformers for 360 panoramic generation, using spherical RoPE and semantic distortion guidance to overcome topological constraints without training or optimization.

  2. arXiv cs.CV TIER_1 English(EN) · Sagie Benaim ·

    SpheRoPE:使用球形RoPE实现零样本、无优化360度全景生成

    We present a zero-shot, training-free and optimization-free framework for generating 360 panoramic images and videos by directly injecting spherical priors into pre-trained diffusion transformers. Existing methods either rely on costly fine-tuning on scarce panoramic data that li…