Sensor2Sensor

Sensor2Sensor 将行车记录仪视频转换为 AV 传感器数据

研究人员开发了 Sensor2Sensor，这是一种新的生成建模方法，可将野外行车记录仪视频转换为适合自动驾驶系统的结构化、多模态传感器数据。该方法利用公开可用视频素材的巨大规模和多样性，解决了专有数据集有限的挑战。Sensor2Sensor 利用扩散架构和 4D 高斯溅射技术，从单目视频生成逼真的多视图摄像头图像和 LiDAR 点云，从而为 AV 开发解锁了新的数据源。