KellyBench

新的KellyBench基准揭示AI模型在体育博彩市场中表现不佳

研究人员推出了KellyBench，这是一个旨在评估语言模型在动态环境中长时序顺序决策能力的新基准。该基准模拟了体育博彩市场，特别是英格兰足球超级联赛，挑战智能体利用历史数据和公开赔率来最大化资金增长。初步评估显示，即使是先进的模型也举步维艰，表现最好的模型平均亏损8%，许多模型则遭遇破产，这表明与人类专家策略相比存在显著差距。