实体
EgoExoMem
EgoExoMem
PulseAugur coverage of EgoExoMem — every cluster mentioning EgoExoMem across labs, papers, and developer communities, ranked by signal.
总计 · 30天
0
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
新的基准和模型推动了人工智能中以自我为中心的视频理解能力
研究人员正在开发新的方法和基准来提高多模态大语言模型（MLLMs）的时间和空间推理能力，特别是针对以自我为中心的视频理解。论文介绍了时间全局策略优化（TGPO）等技术来增强时间感知能力，以及Whareformer等模型用于跟踪长时以自我为中心的视频中的对象。新的基准，如EgoPolice和EgoExoMem，正在被创建，以在具有挑战性的数据集上评估这些模型，包括警方佩戴的摄像机录像和同步的以自我为中心/以外的视频对，突显了即使是像Ge…
-
新的基准和合成数据旨在提升AI的自我中心视频理解能力
研究人员引入了新的基准和合成数据生成方法，以提高大型多模态模型（LMMs）在自我中心视频数据上的性能。EgoBabyVLM基准侧重于从自然、弱对齐的自我中心视频中进行语言接地，突显了当前LMMs在该领域的局限性。类似地，EgoExoMem使用同步的自我中心和外中心视频来解决跨视图记忆推理问题，表明现有模型难以达到高精度。为了克服数据收集的挑战，EgoInteract提供了一个可控的模拟器，用于生成具有密集注释的合成自我中心视频，并在真…