DriveGPT4-V2

新的DriveCode方法提升了LLM在自动驾驶领域的精度

研究人员开发了DriveCode，一种新的数值编码方法，旨在提高大型语言模型（LLM）在自动驾驶系统中的性能。传统的LLM由于分词限制，在精确数值推理方面存在困难。DriveCode通过将数字映射到LLM隐藏空间中的专用嵌入来解决这个问题，从而能够更好地将数值数据与视觉和文本信息集成。在OmniDrive、DriveGPT4和DriveGPT4-V2等数据集上的评估表明，DriveCode能够增强轨迹预测和控制信号生成。