研究人员推出了FullFront,这是一个旨在评估多模态大语言模型(MLLMs)在整个前端工程工作流中的新基准测试。该基准测试评估三个关键任务:网页设计概念化、视觉元素理解和代码生成。与之前的基准测试不同,FullFront采用新颖的两阶段流程,从真实网页创建干净的HTML,避免版权问题并确保多样性。初步测试显示,当前MLLMs在页面感知、代码生成和交互实现方面存在显著局限性,与人类专家相比存在巨大的性能差距。 AI
影响 突出了当前多模态大语言模型在复杂编码任务中的局限性,指明了AI辅助软件工程未来发展的方向。
排序理由 一项介绍新AI模型评估基准测试的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →