一个名为AStockArena的新基准已被开发出来,用于评估金融代理,特别是大型语言模型(LLMs),在中国A股市场实时交易场景中的决策能力。该基准超越了传统的基于收益的指标,审计交易的忠实度、证据支持以及与账户状态的一致性。在13个模型和超过3000个决策中,AStockArena发现绝大多数交易点存在审计差距,其中证据差距是最常见的问题。 AI
影响 通过关注超越简单收益的决策审计,该基准可能带来更可靠、更值得信赖的金融交易AI代理。
排序理由 该集群包含一篇介绍AI代理评估新基准的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →