three-dimensional object detection
PulseAugur coverage of three-dimensional object detection — every cluster mentioning three-dimensional object detection across labs, papers, and developer communities, ranked by signal.
-
立体4D雷达框架通过绝对速度估计增强3D目标检测
研究人员开发了一个使用立体4D雷达进行3D目标检测的新框架。该方法整合了左右雷达传感器之间的几何对齐,以估计物体的绝对速度,克服了传统雷达仅提供径向速度的局限性。该系统还融合了两个传感器的互补特征,以实现更鲁棒的感知。在内部数据集上的实验表明,与单目4D雷达基线相比,AP 3D提高了8.82个百分点,AP BEV提高了9.0个百分点,性能显著提升。
-
立体4D雷达通过绝对速度估计增强3D目标检测
研究人员开发了一个使用立体4D雷达进行3D目标检测的新框架。该系统通过利用两个雷达传感器之间的几何视差来估计目标的绝对速度,从而解决了信号杂波和稀疏数据等挑战。该方法融合了两个雷达的互补特征,与现有的单目4D雷达方法相比,在3D目标检测方面取得了显著的性能提升。
-
Qwen-Drive-1.0 集成了 3D 感知、VQA 和运动规划,用于自动驾驶
Qwen 推出了 Qwen-Drive-1.0,一个专为自动驾驶设计的视觉语言基础模型。该模型通过利用预训练的 VLM 架构和外部模块,统一了 3D 感知、视觉问答和运动规划。它包含一个鸟瞰视角感知头,用于 3D 对象检测和语义占用预测等任务,以及一个用于生成未来轨迹的规划专家。该模型采用分阶段的配方进行训练,结合了驾驶监督和通用视觉语言数据,以保持广泛的能力。
-
新的TADP方法提高了KITTI数据集上的三维目标检测精度
研究人员开发了一种名为任务感知可变形预测(TADP)的新方法,用于单阶段三维目标检测。该方法旨在改进各种检测任务的特征提取和融合。TADP利用了三重特征细化聚合模块和多尺度特征聚合块,最终形成一个任务感知可变形头部,该头部能够适应每个任务的侧重点和交互。在KITTI数据集上的实验表明,TADP实现了80.91%的汽车mAP,优于几种现有的最先进方法。
-
新研究通过紧凑骨干网络和视觉模型增强三维检测 · 跟踪4个来源
两篇新研究论文介绍了通过更有效地集成激光雷达和相机数据来增强自动驾驶中三维目标检测的新方法。DeGuNet提出了一种专为深度引导学习设计的超紧凑图像骨干网络,将内存消耗降低高达66.5%,并提高推理速度,同时提升mAP增益。ViCo3D利用DINOv2等视觉基础模型从激光雷达数据中提取更丰富的语义先验,改善车联网系统中的协同感知,并取得最先进的成果。
-
LiDAR 3D目标检测模型易受对抗性攻击
一篇新发表在arXiv上的研究论文分析了自动驾驶中使用的基于LiDAR的3D目标检测模型的对抗性鲁棒性。该研究引入了一个全面的框架,根据点云密度和定位等结构性因素以及错误分类和定位误差等预测性因素来评估模型。研究结果表明,高容量的基于体素的检测器比基于柱状的检测器更容易受到特定对抗性攻击,而非基于锚点的检测器鲁棒性较差,这表明需要改进训练技术和评估基准。
-
HilDA框架推动了用于自动驾驶的自监督LiDAR预训练
研究人员推出HilDA,一个新颖的自监督预训练框架,旨在增强自动驾驶应用的LiDAR骨干网络。该框架利用视觉基础模型(VFMs)进行分层和全局上下文蒸馏,以更好地将来自摄像头数据的语义和几何信息与LiDAR序列对齐。HilDA还包含一个时间占用扩散目标,以确保时空一致性。该方法在跨模态蒸馏基准测试中展示了最先进的性能,并在3D目标检测、场景流估计和语义占用预测方面取得了改进结果。
-
ATN3D 改进了稀疏条件下的激光雷达-雷达3D目标检测
研究人员开发了ATN3D,这是一个新的激光雷达-雷达框架,旨在改进稀疏感知条件下的3D目标检测,这对于自动驾驶汽车至关重要。该系统通过采用密度感知早期融合和占用门控聚合来减少噪声并优化远距离物体的检测,从而解决了长距离检测的挑战。ATN3D在VoD基准测试中展示了显著的性能提升,尤其是在雾天条件下以及对30米以外的物体检测方面,表明在挑战性环境中可以实现更可靠的早期检测。
-
新的融合方法应对三维目标检测挑战
两篇新研究论文提出了使用激光雷达和相机数据进行三维目标检测的先进融合技术。第一篇,几何感知鱼眼-激光雷达融合(GA-HF),通过保持鱼眼几何形状并使用注意力机制纠正特征失真来应对低重叠设置中的挑战。第二篇,CAMF-Det,专注于无人机(UAV)平台,开发了一个闭环感知框架,通过建模和预测遮挡强度来处理由树冠和其他地面物体引起的遮挡。