English(EN) COMPASS: Complete Multimodal Fusion via Proxy Tokens and Shared Spaces for Ubiquitous Sensing

COMPASS框架解决了多模态传感中的缺失数据问题

作者 PulseAugur 编辑部 · [1 个来源] · 2026-06-09 04:00

研究人员开发了COMPASS，一个新颖的框架，旨在通过解决缺失数据模态的挑战来增强多模态传感。该系统通过使用代理令牌来填充缺失的模态（使用从观察到的模态派生的估计表示），从而确保一致的融合接口。COMPASS在各种数据集和缺失模态场景中表现出更强的鲁棒性，优于传统的插补和基于翻译的方法。 AI

影响通过提供一种在融合过程中处理缺失数据的一致方法，增强了多模态AI系统的鲁棒性。

排序理由这是一篇描述新技术框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]

AI 生成摘要 · Google Gemini · 来自 1 个来源。我们如何撰写摘要 →

报道来源 [1]

arXiv cs.CV TIER_1 English(EN) · Hao Wang, Yanyu Qian, Pengcheng Weng, Zixuan Xia, William Dan, Yangxin Xu, Fei Wang · 2026-06-09 04:00

COMPASS：通过代理令牌和共享空间实现无处不在的传感的完整多模态融合

arXiv:2604.02056v2 Announce Type: replace Abstract: Missing modalities in multimodal sensing cause not only information loss but also a fusion-interface mismatch: a fusion head trained on a canonical set of modality slots must operate on changing observed subsets at inference tim…