MTA-RL

MTA-RL框架通过多模态AI增强城市驾驶

研究人员开发了MTA-RL，一个新颖的框架，它集成了多模态Transformer-based 3D可供性与强化学习，以实现鲁棒的城市自动驾驶。该方法融合了RGB图像和LiDAR数据，以预测明确的、几何感知的可供性，为强化学习策略创建了一个结构化的观测空间。在CARLA模拟器中的评估表明，与现有基线相比，MTA-RL在样本效率、稳定性和零样本泛化方面表现更优。