PulseAugur
中
实时 12:05:08
English(EN) Glove2Hand: Synthesizing Natural Hand-Object Interaction from Multi-Modal Sensing Gloves

Glove2Hand框架从传感手套合成逼真的裸手交互

作者 PulseAugur 编辑部 · [1 个来源] ·

研究人员开发了Glove2Hand，一个将多模态传感手套数据转化为与物体交互的裸手光线写实视频的新框架。该方法保留了接触力和运动等关键物理动力学，而这些在传统视频记录中常常缺失。该系统使用新颖的3D高斯手部模型来实现时间一致性，并使用基于扩散的恢复器实现无缝场景集成，有效处理遮挡和形变。该框架还引入了HandSense，一个用于手部-物体交互（HOI）的新数据集，它将手套数据与视频同步，旨在改进接触估计和手部跟踪等应用。 AI

影响 增强了虚拟和机器人手部交互的真实感和物理准确性，改进了AR/VR和机器人等应用。

排序理由 该集群包含一篇详细介绍用于合成手部-物体交互的新框架和数据集的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

报道来源 [1]

  1. arXiv cs.CV TIER_1 English(EN) · Xinyu Zhang, Ziyi Kou, Chuan Qin, Mia Huang, Ergys Ristani, Ankit Kumar, Lele Chen, Kun He, Abdeslam Boularias, Li Guan ·

    Glove2Hand: Synthesizing Natural Hand-Object Interaction from Multi-Modal Sensing Gloves

    arXiv:2603.20850v2 Announce Type: replace Abstract: Understanding hand-object interaction (HOI) is fundamental to computer vision, robotics, and AR/VR. However, conventional hand videos often lack essential physical information such as contact forces and motion signals, and are p…

相关话题