ExBind

新的ExBind基准测试多模态模型视觉到可执行代码的准确性

研究人员推出ExBind，一个旨在评估多模态模型将视觉或语义参考映射到特定可执行对象准确性的新型诊断基准。该基准隔离了视觉到可执行代码的对应层，超越了简单的执行成功，以查明对象选择中的失败。ExBind包含一套广泛的250个案例和一套有针对性的240个案例，格式包括SVG、DOM和表格等。早期评估显示，Qwen2.5-VL-3B在该基准上实现了76.4%的精确准确率，而Qwen3-VL-4B达到了98.8%的精确准确率。