研究人员开发了 AnythingReality,一个将在线 3D 高斯溅射与虚拟现实探索和语音驱动交互相结合的新系统。该系统使用 ORB-SLAM3 进行姿态估计,使其能够处理嘈杂的真实世界数据,而无需依赖外部姿态或干净的深度信息。AnythingReality 支持对增量重建场景进行沉浸式 VR 探索,并包含一个用于语音指令、场景描述和记录兴趣点的语义模块。与现有的在线高斯溅射方法相比,该系统展示了改进的图像质量和相当的帧率,其视觉语言模型实现了 88% 的物体识别率。 AI
影响 通过集成先进的计算机视觉和语言模型,增强了实时 3D 重建和交互式 VR 体验。
排序理由 该集群描述了一篇关于用于 3D 重建和 VR 交互的新颖系统的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- AnythingReality
- Gaussian splatting
- Miguel Altamirano Cabrera
- Simultaneous localization and mapping
- TUM-RGBD
- virtual reality
- vision-language model
AI 生成摘要 · Google Gemini · 来自 3 个来源。 我们如何撰写摘要 →