PulseAugur
实时 07:48:06
Deutsch(DE) MirrorCraft: Paired Evaluation under Hidden Rule Changes in Minecraft

新的 Minecraft 基准测试在隐藏规则变更下测试 AI 代理

研究人员推出了 MirrorCraft,这是一个新的基准测试,旨在评估 AI 代理在 Minecraft 中应对动态和隐藏规则变更的能力。与具有固定机制的现有基准测试不同,MirrorCraft 创建了配对的“Mirror”世界,这些世界复制其“Vanilla”对应世界,但修改了服务器端规则。这使得能够有控制地研究代理如何适应不断变化的博弈机制,例如配方或目标的改变,同时保持地形和资源放置等其他方面的一致性。使用 MirrorCraft 进行的实验表明,隐藏的规则变更对代理的性能有显著影响,当未提供规则描述时,ReAct 配置得分最高。 AI

影响 该基准测试有望加速对更具适应性和鲁棒性的 AI 代理的研究,这些代理能够在动态环境中学习和运行。

排序理由 该集群包含一篇关于 AI 代理新基准测试的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的 Minecraft 基准测试在隐藏规则变更下测试 AI 代理

报道来源 [1]

  1. arXiv cs.AI TIER_1 Deutsch(DE) · Jianxin Gao, Beini Hu, Runze Li, Wanli Peng, Ruohan Lei, Jinyuan Zhang, Linna Deng, Tianyi Yu, Zining Wang ·

    MirrorCraft:Minecraft中隐藏规则变更下的配对评估

    arXiv:2607.29218v1 Announce Type: new Abstract: With the prosperity of the large language models (LLMs), it has become an interesting topic: how do LLM-based agents work in Minecraft? Unfortunately, most existing benchmarks evaluate them under fixed game mechanics. High performan…