研究人员开发了 Janus,一个旨在增强大型语言模型 (LLM) 驱动的科学和工程领域发现的新型框架,在这些领域中评估成本高昂。Janus 通过使用 LLM 来协同进化目标程序和代理评估器,解决了昂贵、高保真模拟或实验的挑战。这种方法利用 LLM 生成任务特定的评估器程序,并用真实结果对其进行校准,从而显著减少了昂贵的真实评估次数。在五个设计任务的测试中,Janus 使用更少的真实评估达到了与基线方法相当的最终性能,证明了其在反馈稀缺且昂贵的领域中的有效性。 AI
影响 在昂贵的评估预算下,能够实现 LLM 驱动的科学和工程领域的发现。
排序理由 该集群描述了在 arXiv 上的一篇学术论文中提出的新框架和方法论。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →