实体
VSAS-Bench
VSAS-Bench
PulseAugur coverage of VSAS-Bench — every cluster mentioning VSAS-Bench across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
Apple推出VSAS-Bench用于实时视觉助手模型评估
Apple研究人员推出了VSAS-Bench，一个旨在实时评估视觉流式助手模型的新框架。与之前的离线评估方法不同，VSAS-Bench纳入了主动性和一致性指标，这对于流式VLMs至关重要。该基准测试包含跨越不同领域和任务类型的18,000多个时间密集型标注，以及标准化的评估协议和指标，以隔离特定的流式VLM能力。他们的评估表明，经过调整的传统VLM可以超越专门的流式模型，其中Qwen3-VL-4B在他们的基准测试中领先表现最佳的流式VLM 3%。
-
VSAS-Bench 框架评估实时视觉流式助手
研究人员推出了 VSAS-Bench，这是一个旨在实时评估视觉流式助手模型的新框架。与之前的离线基准测试不同，VSAS-Bench 纳入了积极性和一致性指标，这对于响应连续输入流的助手至关重要。该基准测试包含超过 18,000 个时间密集型标注和标准化的评估协议，以分析各种设计因素下的准确性-延迟权衡。