SonarLLM

新型SonarLLM模型通过原生声纳处理增强水下感知能力

研究人员开发了SonarLLM，这是一种新颖的多模态大语言模型，专为水下感知而设计。与主要依赖光学数据的现有模型不同，SonarLLM原生处理声纳输入，使其能够根据不断变化的环境条件自适应地利用声纳和光学数据。该模型与用于评估水下感知任务的基准数据集SonarBench一同推出。在测试中，SonarLLM的性能显著优于基线模型，在识别、计数、视觉问答和字幕生成等任务中表现出色，尤其是在充满挑战的浑浊水下环境中。