研究人员推出了一种名为Thinking with Drafting (TwD)的新方法,以改进多模态大型语言模型的视觉推理能力。TwD将处理视觉输入重新概念化为光学解压,从视觉令牌中重构潜在的逻辑结构。该方法使用极简的领域特定语言(DSL)作为中间表示,迫使模型将其推理草拟成可执行代码以进行自我验证。在新的视觉代数基准VisAlg上的实验表明,TwD增强了认知脚手架,并且视觉生成充当逻辑验证器。 AI
影响 引入了一个新的视觉推理框架,可以提高多模态AI系统的准确性和可验证性。
排序理由 这是一篇介绍多模态模型中一种新颖视觉推理方法的论文。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →