研究人员发现视频大语言模型（LLMs）存在严重的读出失败问题，这阻碍了它们准确计数屏幕上物体经过等事件的能力。尽管模型拥有必要的信息，但它们在正确处理和输出信息方面存在困难。该研究提出了两种读出导向的修复方法：片段定位监督和离散事件符号侧通道，这使得在具有挑战性的基准测试中，同类物体计数性能从46.7%提高到65.0%。进一步的分析揭示了数据完整性问题，并强调虽然核心读取能力是存在的，但部署的输出头仍然是一个瓶颈。 AI
影响 识别了视频大语言模型中的一种特定故障模式，可能指导未来模型开发和评估，以提高事件理解能力。
排序理由 学术论文，详细介绍了LLM局限性的具体技术发现和拟议解决方案。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
