名为VisCodeBench的新基准数据集已被推出,用于评估文本到可视化系统,特别是在复杂、实际场景中的应用。该基准包含教育、科学和普通受众领域的2,672个样本。测试结果显示,尽管Codex、Claude Code和LIDA等当前系统在基本执行方面有所改进,但没有一个系统能够完全复制参考可视化,数据相似性得分在0.69到0.81之间。研究还强调,系统设计,包括提示和精炼流程,显著影响结果,而延迟仍然是这些工具面临的实际挑战。 AI
影响 突出了AI从文本生成可视化能力方面的改进领域,影响了数据分析和用户交互工具。
排序理由 该集群描述了一个用于评估AI系统的新基准数据集,属于研究范畴。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →