PulseAugur
实时 10:57:51
English(EN) Objects as Audio-Visual Modal Sound Fields

新的AV-MSF方法从视觉和声音中重建物体声学

研究人员开发了一种名为视听模态声场(AV-MSF)的新方法,可以从视觉数据和有限的撞击声记录中重建物体声学。该方法将3D高斯泼溅与视觉特征相结合,创建了具有几何感知的先验,并用物理上有意义的模态参数表示撞击声场。据报道,AV-MSF实现了最先进的撞击声渲染效果,优于基于物理和基于数据的方法,并支持接触定位和物体声音编辑等应用。 AI

影响 这项研究可能带来更真实、信息更丰富的视听模拟,增强机器人、虚拟现实和内容创作领域的应用。

排序理由 该集群包含一篇详细介绍新方法及其实验结果的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的AV-MSF方法从视觉和声音中重建物体声学

报道来源 [1]

  1. arXiv cs.CV TIER_1 English(EN) · Zisen Shao, Zihao Wei, Derong Jin, Ruohan Gao ·

    Objects as Audio-Visual Modal Sound Fields

    arXiv:2608.05145v1 Announce Type: new Abstract: While modern 3D reconstruction excels at modeling object geometry and appearance, it largely ignores the rich acoustic cues revealed through physical interaction. Object impact sounds convey material, stiffness, and structural prope…