SpyFall

揭示了用于 LLM 社交推理的新基准和训练方法

研究人员推出了 Social Gym，这是一个包含 21 种多智能体社交游戏的新环境，旨在客观地对 LLM 的社交推理进行基准测试和改进。该系统使用 Elo 锦标赛对模型进行排名，结果显示 GPT-5 mini 领先，但在所有游戏和角色中表现不均衡。为了解决这些局限性，开发了 SPaRTan（Self-Play and Reflect-Transfer）方法，这是一种无需训练的循环，模型在该循环中生成并应用剧本以提高其性能，特别是使 …