OpenTouch

新的HOPE框架可从单目视频中估计手部-物体压力

研究人员开发了HOPE，一个用于从单目视频估计手部-物体交互过程中物理压力的新颖框架。该方法将压力估计视为一个视频预测问题，使其能够处理各种物体形状和动态交互。HOPE将各种压力和接触数据源（包括触觉手套数据）整合到一个共享的手部顶点空间中，以改进学习，即使在度量标签稀缺的情况下也是如此。在多个基准上的实验表明，HOPE能够泛化到裸手视频并预测接触和压力。