PulseAugur
实时 05:53:47
English(EN) Not All Patches are Equal: Sampling Matters for Visible-Infrared Pre-Training

新的重要性感知采样方法增强了可见光-红外预训练

研究人员开发了一种名为重要性感知采样(IAS)的新型可见光-红外(VIS-IR)对齐预训练方法。该方法通过根据图像块的可靠性调整训练重点,解决了均匀图像块对比学习的局限性。IAS 从红外结构线索中提取图像块权重,并学习一个软性重要性掩码,可选择性地使用课程学习策略。该方法设计为即插即用,兼容各种对齐技术,并在语义分割和目标检测等任务的多个 VIS-IR 基准测试中展现出了一致的改进。 AI

影响 这种新的采样方法可以提高多传感器感知模型在AI系统中的鲁棒性和可迁移性。

排序理由 详细介绍可见光-红外预训练新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.CV 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的重要性感知采样方法增强了可见光-红外预训练

报道来源 [1]

  1. arXiv cs.CV TIER_1 English(EN) · Qiwei Ma, Bin Deng, Junjie Zhu, Qiangjuan Huang, Puhong Duan, Ke Yang, Xudong Kang, Shutao Li ·

    并非所有补丁都均等:采样对可见光-红外预训练至关重要

    arXiv:2607.20238v1 Announce Type: new Abstract: Visible-infrared (VIS-IR) alignment is a key pre-training task for robust multi-sensor perception. Most existing methods use uniform patch-wise contrastive learning, but this can be unreliable in VIS-IR data because imaging-physics …