FlowTouch

FlowTouch 模型从视觉预测触觉数据，跨传感器泛化

研究人员开发了 FlowTouch，一个专为视图不变视触觉预测设计的新型模型。该模型整合了场景重建和基于 Flow Matching 的图像生成，以从视觉数据预测触觉信息。FlowTouch 利用物体的局部 3D 网格来编码信息，抽象化场景特定细节，并实现对新传感器实例的泛化。该系统已证明其弥合模拟到现实差距的能力，并显示出在抓取稳定性预测等下游应用中的潜力。