研究人员开发了一种名为弯曲光线期望位置编码(CRePE)的新方法来改进视频生成模型。CRePE通过沿统一相机模型光线表示具有深度感知的图像标记分布来解决现有相机编码技术的局限性。这种方法增强了对相机参数、镜头类型和方向的控制,在针孔、广角和鱼眼镜头上表现良好。该方法可以与冻结的视频扩散Transformer无缝集成,还可以整合外部几何图以进行场景几何条件生成。 AI
影响 增强了视频生成模型中的控制和保真度,可能改进需要精确相机和场景几何的应用。
排序理由 详细介绍视频生成新技术的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- CRePE
- Curved Ray Expectation Positional Encoding
- Geometric Attention Adapter
- Hugging Face
- Jong Chul Ye
- Unified Camera Model
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →