研究人员开发了 LookThere,一个新颖的框架,它使用强化学习使视觉 Transformer 仅处理最相关的图像 token。通过训练一个独立的输入选择器和表示提取器,该方法显著降低了计算负荷,使模型能够在不依赖启发式方法的情况下学习关注点和查看内容。LookThere 展现出令人印象深刻的效率,仅使用 0.2% 的输入 token 即可保持准确性,并在分类、分割和回归等各种计算机视觉任务中表现出强大的泛化能力。 AI
影响 通过智能选择相关的图像 token,显著节省视觉模型的计算量,有望加速高分辨率任务的推理。
排序理由 该集群包含一篇详细介绍计算机视觉新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →