研究人员开发了Argus-Unified,这是一种新颖的统一多模态模型,专为图像理解和生成而设计。该模型以其紧凑的尺寸和经济高效的训练而著称,它采用了两阶段流水线,并利用了预训练的视觉语言模型。通过采用混合视觉令牌和冻结的视觉编码器,Argus-Unified在GQA、POPE和VQAv2等基准测试中取得了最先进的性能,同时还展示了具有竞争力的生成能力。该开发旨在显著降低创建此类统一模型的成本和数据需求,使其更易于获取。 AI
影响 通过降低数据和计算成本,降低了开发统一多模态AI模型的门槛。
排序理由 该集群包含一篇详细介绍新模型及其在基准测试中性能的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →