Hand2Bot

新数据集和生成式流程改进人机交接预测

研究人员开发了Hand2Bot，一个旨在改进人机物体交接预测的新数据集和名为PassGen的生成式流程。PassGen利用Stable Video Diffusion和Intention-Aware Temporal Face Encoder创建逼真的交接序列，解决了人机协作中数据稀缺和仿真到现实的差距问题。该系统采用基于形态学的深度编辑策略来模拟真实世界的传感器噪声，从而实现更鲁棒的零样本迁移和更早的意图预测，以实现具有社会意识的机器人行为。