3D reconstruction
PulseAugur coverage of 3D reconstruction — every cluster mentioning 3D reconstruction across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
SAF3R框架通过动态稀疏注意力提升三维重建Transformer的效率
研究人员推出SAF3R,一个旨在提高前馈三维重建(F3R)Transformer效率的新框架。该新方法解决了F3R Transformer中跨视图全局注意力二次复杂度引起的计算瓶颈,尤其是在处理长图像序列时。SAF3R采用一种无需训练的动态稀疏注意力机制,结合离线头分析和高效的在线适应策略,以动态匹配输入依赖的注意力行为。实验表明,SAF3R在保持相机姿态估计和三维重建质量的同时实现了显著的稀疏性,从而带来了显著的端到端加速。
-
新AI方法解决单图像和视频的三维和四维重建问题
两篇新研究论文介绍了从视觉数据进行三维和四维重建的新方法。PRISM 提供了一种用于单图像三维重建的前馈方法,将任务分解为几何先验和学习到的残差校正,显著缩短了推理时间。Lift4D 通过结合时间一致的单视图三维估计、可变形三维高斯泼溅以及视图条件扩散先验,解决了单目视频中动态、非刚性对象的四维重建问题,提高了在野外场景下的性能。
-
新数据集增强结肠镜检查的3D重建能力
研究人员推出C3VD-DEFCOL,一个旨在改进结肠镜检查过程3D重建的新数据集。该数据集提供了逼真的体内外观以及密集、时间分辨的3D真实情况,填补了当前资源的空白。它包含了受控的变形,以模拟结肠的运动和蠕动,从而在挑战性条件下更好地评估重建算法和姿态估计。
-
新方法利用3D和2D AI估计小麦穗体积
研究人员开发了一种新颖的混合方法,结合3D重建和知识蒸馏技术来估计小麦穗体积。该方法旨在克服传统测量方法的挑战,这些方法要么计算成本高昂,要么对环境条件敏感。通过将3D模型中的知识蒸馏到基于2D图像的Transformer中,该系统显著降低了平均绝对误差和推理时间,使其适用于高通量田间表型分析。
-
NeRF 方法提升航天器姿态估计和三维重建能力
研究人员开发了新的基于神经辐射场(NeRF)的方法,以提高从图像中进行航天器姿态估计和三维重建的性能。一种方法利用基于 NeRF 的增强技术,用更少的图像训练姿态估计器,克服了传统基于 CAD 的训练的局限性。另一种方法通过引入每张图像的外观嵌入和姿态校正来增强 NeRF,使其在重建过程中对光照变化和不准确的姿态数据更加鲁棒。
-
CalibAnyView 通过多视图几何一致性改进相机标定
研究人员开发了 CalibAnyView,一种适用于任意数量输入视图的相机标定新方法,克服了单视图方法的局限性。该技术明确地对多张图像之间的几何一致性进行建模,这是在真实场景中实现精确 3D 感知的关键一步。CalibAnyView 利用了多视图 Transformer 和几何优化框架,与现有方法相比,其性能更优越,并且随着输入视图的增加,精度也会提高。
-
贝叶斯框架优化3D重建任务的相机视图
研究人员开发了一种新的贝叶斯决策理论框架,用于在3D重建任务中选择最佳的下一个相机视图。该方法将先验分布置于隐式曲面上,并使用随机重建来确定后验分布。与一般的减少不确定性技术相比,该方法优先减少特定下游任务(如语义分类、分割或物理模拟)关键区域的不确定性,从而以更少的视图提高了性能。
-
新AI方法推动3D重建、图像分割和声音恢复
研究人员开发了用于图像分割和重建的新方法。一篇论文介绍了一种使用可微分方法对连续值图像上的简单点检测进行拓扑保持图像分割的新颖方法。另一项研究回顾了制造业中的3D重建技术,强调了深度学习在提高准确性和速度方面的作用,其中质量检测是一个主要应用。第三篇论文提出了一种用于从物体表面振动中恢复声音的物理引导模型,在挑战性场景中表现优于先前的方法。最后,一种用于Ptychographic图像重建的新深度学习框架在单位圆上对相位进行建模,提高了…