Qwen2.5-VL-3B-Instruct
PulseAugur coverage of Qwen2.5-VL-3B-Instruct — every cluster mentioning Qwen2.5-VL-3B-Instruct across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
新方法提高了 AI 模型忠实视觉归因的准确性
研究人员开发了两种新的忠实视觉归因方法 CoPAIR 和 TRACE,该方法可识别支持模型预测的图像区域。这些方法侧重于生成紧凑的 top-k 证据掩码,而不是对所有区域进行完全排序。CoPAIR 使用 PhaseWin-Greedy 方法进行候选生成,而 TRACE 则使用交叉熵采样和其他技术直接搜索固定基数的掩码。这两种方法在 ImageNet 分类和 MLLM 归因等各种归因任务上都取得了新的最先进成果,其中 TRACE 掩码在…
-
新AI框架使用多模态大语言模型分析甲骨文
研究人员开发了OracleAnalyser,一个旨在利用多模态大语言模型(MLLMs)分析甲骨文隐含义的新框架。该框架对Qwen2.5-VL-3B-Instruct模型进行了微调,并引入了一种名为Stable Focal Preference Optimization(SFPO)的新型偏好优化算法。这种方法,连同新发布的的数据集和基准测试,展示了卓越的分析性能,使用一个3B参数模型取得了显著成果,并超越了更大的模型。
-
小型视觉语言模型用于为视障人士提供多语言艺术品描述
研究人员进行了一项试点研究,旨在使用小型、本地部署的视觉语言模型为盲人和低视力观众生成艺术品描述。该研究侧重于多语言能力,使用 Qwen2.5-VL-3B-Instruct 模型,比较了针对德语、罗马尼亚语和塞尔维亚语的特定语言适配器与单个多语言适配器。初步研究结果表明,特定语言适配器为罗马尼亚语和塞尔维亚语提供了更稳定的控制和更好的视觉基础,而多语言方法在德语方面具有竞争力,这凸显了本地部署的视觉语言模型在可访问性方面的潜力。
-
Modal 通过 Python 字典将多模态推理性能提升 10% 以上
Modal 发现多模态推理引擎(如 SGLang)存在性能瓶颈,这会影响 GPU 利用率。通过分析调度器,他们发现昂贵的共享 GPU 内存簿记操作可以替换为简单的缓存查找。这项优化通过对单个 Python 字典的更改实现,使多模态工作负载的吞吐量和延迟提高了 10% 以上。