研究人员开发了VisCo,一个用于压缩视觉语言模型(VLM)中视觉令牌的新型框架。与需要大量重新训练或外部模块的先前方法不同,VisCo利用VLM的现有能力作为内在压缩器。这种训练高效的方法使用带有内存令牌的参数共享自编码器来压缩视觉信息,在各种压缩比下均表现出优越的性能,甚至在与原始令牌结合时也能改进基础模型。 AI
影响 该方法可以显著降低视觉语言模型的推理延迟和内存需求,从而实现更高效的部署和更广泛的可访问性。
排序理由 该集群包含一篇学术论文,详细介绍了VLM中视觉令牌压缩的新方法。
- alphaXiv
- arXiv
- CatalyzeX
- DagsHub
- Gotit.pub
- Hugging Face
- large language models
- ScienceCast
- VisCo
- vision-language models
- Vision--Language Models
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →