研究人员开发了一种从流式视频进行在线新视角合成的新方法,解决了实时处理的挑战,同时保持长期记忆。所提出的技术将内存更新与逐帧应用分离,执行周期性更新以管理计算成本并防止不稳定。该方法利用跨视图注意力,并引入了辅助内存损失和内存缓存等机制,以确保保留历史上下文并将权重正则化以防止漂移,从而实现了最先进的实时性能。 AI
影响 这项研究可以实现更高效的实时视频处理和新视角合成应用。
排序理由 这是一篇详细介绍计算机视觉问题的新技术方法的学术论文。
- alphaXiv
- arXiv
- arXivLabs
- CatalyzeX Code Finder for Papers
- Connected Papers
- CORE Recommender
- DagsHub
- Dynamic Novel View Synthesis
- Gotit.pub
- Hugging Face
- Influence Flower
- Litmaps
- Memory Caching
- Memory Loss
- Online Neural Space Time Memory
- ScienceCast
- scite Smart Citations
- Test-Time Training
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →