PulseAugur
实时 14:27:40
English(EN) StableHand: Quality-Aware Flow Matching for World-Space Dual-Hand Motion Estimation from Egocentric Video

StableHand框架增强了从视频进行双手法运动估计的能力

研究人员开发了StableHand,一个用于从第一人称视角视频估计世界空间双手法运动的新型框架。该方法通过将每帧的可靠性信号纳入流匹配过程,解决了手离开相机视野和遮挡等挑战。StableHand利用一个学习到的质量网络来预测观测质量,并据此调整其生成过程,从而在HOT3D和ARCTIC等基准测试中取得了显著的性能提升。 AI

影响 通过实现更准确的视频手部运动跟踪,改进了机器人控制和人机交互。

排序理由 发布了一篇详细介绍新AI框架的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

StableHand框架增强了从视频进行双手法运动估计的能力

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Xingxing Zuo ·

    StableHand: 质量感知流匹配用于从单目视频中进行世界空间双手运动估计

    Recovering world space 4D motion of two interacting hands from egocentric video is a fundamental capability for supervising robot policy learning, where wrist trajectories track the end-effector and finger articulations specify the grasp pose. Two major challenges arise in this s…