Arena
PulseAugur coverage of Arena — every cluster mentioning Arena across labs, papers, and developer communities, ranked by signal.
- instance of MAI-Image 2.5 90%
- invested by Andreessen Horowitz 90%
- competes with Kimi k3 80%
- competes with GPT 5.6 "Sol" 80%
- competes with Gemini 4 Argon 80%
- competes with GPT -6 Astra 80%
- instance of Artificial Analysis 70%
- instance of Chatbot Arena 70%
- used by Artificial Analysis 70%
- used by Claude (Opus 5.5 70%
- competes with Moonshot AI 70%
- instance of Kimi k3 70%
- 2026-10-20 product_launch Gray Swan relaunched its AI red-teaming platform, Arena, with new features to test AI agents. 来源
- 2026-10-09 funding Arena raised $200 million in Series B funding at a $3.1 billion valuation. 来源
- 2026-10-09 funding Arena raised $200 million in Series B funding at a $3.1 billion valuation. 来源
- 2026-10-08 funding Arena, an AI evaluation platform, raised $200 million in Series B funding at a $3.1 billion valuation. 来源
- 2026-10-08 funding Arena, an AI model evaluation platform, raised $200 million in Series B funding at a $3.1 billion valuation. 来源
- 2026-06-29 funding Arena, an AI leaderboard provider, has achieved $100 million in annualized run-rate revenue. 来源
- 2026-06-23 product_launch Meta is reportedly developing a new prediction market app named Arena. 来源
6 天有情绪数据
Meta's Arena prediction market app to launch within 60 days
Meta has been actively developing its prediction market app, Arena, following failed acquisition talks with Kalshi and exploring a virtual currency model. Given the recent reports and Zuckerberg's involvement, it's plausible that Meta will aim to launch this product to leverage its user base and compete in the prediction market space within the next two months.
Arena's dual identity as AI leaderboard and Meta app
The entity 'Arena' is currently associated with two distinct concepts: a successful AI model evaluation leaderboard company that has achieved $100M ARR, and a prediction market app being developed by Meta. This overlap in naming could lead to confusion and warrants tracking to see if one entity subsumes the other, or if the naming convention is a deliberate strategy.
Meta's Arena app to integrate real money betting within 90 days
While Meta's Arena app is initially considering a virtual currency or points system, the company has a history with real-money prediction markets (Forecast). Given the competitive landscape and the potential for higher engagement, it's probable that Meta will transition Arena to incorporate real money betting within three months of its initial launch.
-
研究揭示AI模型排行榜的漏洞,可操纵排名
arXiv上发表的一篇新研究论文详细介绍了基于偏好的语言模型评估系统(如在线排行榜中使用的系统)的漏洞。该研究题为“排行榜攻击”(Leaderboard Hacking),表明可以通过战略性投票、提示选择和模型提名来操纵这些系统。这些操纵策略可以将模型的排名人为地提高多达45位,引发了对依赖Bradley-Terry模型的当前评估框架可靠性的担忧。
-
开发者对代码审查的 LLM 进行基准测试,发现解析和路由错误
一位开发者针对其公司的代码审查流程对八个大型语言模型进行了基准测试,发现模型性能和成本并非唯一需要考虑的因素。基准测试揭示了模型输出解析方面的问题,其中 Claude Opus 5.5 的 JSON 输出因其散文中的一句话而被误解。此外,评估过程本身存在一个 bug,即 Claude 模型并未按预期调用,由于路由规则,系统默认使用了 DeepSeek 和 Kimi 等其他模型。这凸显了健壮的评估流程以及对模型使用和成本进行仔细监控的重要性。
-
新的无线电到姿态方法校正机器人定位漂移
研究人员开发了一种名为无线电到姿态信息(RPI)的新颖方法,用于校正机器人团队协同定位中的仪表漂移。该技术利用无线电衰减图来优化机器人姿态,显著减少位置误差。在模拟中,RPI 匹配了联合估计结果,在实际试验中,它将 50x50 米竞技场内的常见位置 RMSE 从 0.542 米降低到 0.140 米。
-
Gemini 4 Argon 表现不一,token 使用量高
自通用可用以来,Google 的 Gemini 4 Argon 模型表现不一,在人工智能分析指数 v5.0 上获得 50 分,落后于 Claude Opus 5.5 和 GPT-6 Astra。尽管 Google 声称 Argon 在许多基准测试中领先,但独立数据显示,与前代产品和竞争对手相比,它更冗长,在任务中消耗的 token 明显更多。开发人员报告称 Argon 的编码能力存在问题,并且它倾向于优先考虑规则而非正确性,尽管它在知…
-
新的ARENA模型提供可解释的太阳耀斑预测
研究人员开发了一种名为ARENA(主动区域注意力聚合)的新型神经网络架构,用于预测太阳耀斑。该模型利用多实例学习和弱监督,仅需要观测的耀斑或无耀斑标签。ARENA的注意力机制无需明确的起源标注即可识别最相关的活动区域进行预测,达到了0.45的Heidke技能得分,与现有方法具有竞争力。
-
Moonshot 发布 Kimi 3.1 Pro,承诺推出开源前沿模型
Moonshot 推出了 Kimi 3.1 Pro,这是一个拥有 2.8 万亿参数和 100 万 token 上下文窗口的多模态模型。该模型在编码、金融建模和智能体能力方面取得了显著改进,在 Artificial Analysis 的 Intelligence Index 和 Arena 的 Code Arena 等独立基准测试中排名很高。虽然 API 现已可用,但 Moonshot 已承诺在 2026 年 11 月 4 日之前发布模…
-
Qwen4 和 Kimi3.1 据称已添加到 Arena 应用程序
Arena 应用程序据称已添加对 Qwen4 和 Kimi3.1 的支持。这一消息引起了用户对 Qwen4 Flash 发布的热切期待。
-
新算法可高效识别LLM评估中的帕累托前沿
研究人员开发了一种名为Vector-Borda Empirical-Gap Elimination (VB-EGE)的新算法,以更有效地识别多目标大型语言模型(LLM)评估中的帕累托前沿。这种自适应采样方法旨在减少绘制关于LLM在数学、代码和写作等各种维度上性能权衡的可靠结论所需的高成本人工比较次数。VB-EGE一旦在统计上确认了模型的帕累托状态,就会逐步将其排除,理论分析表明其在样本复杂度方面接近minimax最优。在Arena、S…
-
Gray Swan重启AI红队演练平台以应对AI代理
AI安全公司Gray Swan已重启其红队演练平台Arena,以应对AI代理带来的不断演变的安全挑战。更新后的平台Arena 2.0专注于新的攻击向量,如间接提示注入(IPI),在这种攻击中,恶意指令隐藏在AI代理可能遇到的内容中。Gray Swan正在举办其迄今为止规模最大的竞赛IPI Black,奖金池高达30万美元,由主要的AI公司赞助,以激励参与者寻找AI代理中的漏洞。
-
FewHumans库提高了大语言模型裁判的可靠性并降低了人工标注成本
一个名为FewHumans的新库已被开发出来,以解决大语言模型裁判在评估AI模型输出时不可靠的问题。这些裁判通常会高估自己的准确性,在大多数测试案例中,仅裁判的置信区间都未能包含真实的人工验证值。FewHumans旨在通过智能地选择人类应标注的数据点、结合人类和LLM的判断,并提供统计上可靠的置信区间来改进这一点,从而在提高准确性的同时减少对广泛人工标注的需求。
-
OpenAI 的 Aurora 图像生成模型在测试中现身
OpenAI 的新型图像生成模型,代号为 Aurora,已短暂出现在 API 标识符和测试平台中。该模型的不同版本,包括 aurora-red、green 和 blue 的 alpha 版本已被发现,表明即将发布。然而,OpenAI 尚未正式确认该模型的身份或其部署计划。
-
Meta发布Muse Spark Open,一个大型开放权重MoE模型
Meta发布了Muse Spark Open,一个拥有8160亿参数的开放权重专家混合(MoE)模型,在Artificial Analysis的Intelligence Index上取得了美国开放权重模型中的最高分。虽然它在全知任务和代码生成等某些领域表现出色,但在智能体评估方面表现不佳,并且商业使用许可受到限制。另一个开放权重模型Reflection Beam 1.0也已发布,拥有1M的上下文窗口和Apache 2.0许可,在一些基…
-
Meta 发布 Muse Spark Open,一个高评分的开放权重模型
Meta 发布了 Muse Spark Open,一个拥有 816B 总参数、42B 激活参数的混合专家(Mixture-of-Experts)模型,并开放了权重。该模型在 Artificial Analysis 的 Intelligence Index 上取得了高分。虽然它在代码生成等某些领域表现出色,并拥有较大的上下文窗口,但在代理评估(agentic evaluations)方面表现不佳,且商业使用许可受到限制。另一个开放权重模…
-
Muse Spark 和 Grok 4.7 在不同基准测试中的表现存在差异
对 Muse Spark 和 Grok 4.7 的比较显示,它们在 Index Theologicus 和 Arena 基准测试上的性能评估存在差异。分析突出了这两个评估平台之间结果的不同,暗示了模型衡量方式或其在不同测试条件下的表现可能存在不一致之处。
-
新研究量化了异质性排序所需的比较次数
一篇新研究论文探讨了在用户偏好异质的情况下,准确排序物品所需的重复成对比较的最佳次数。该研究基于异质Bradley-Terry模型,表明虽然一些朴素算法需要与排名准确度的平方成反比的比较次数,但更有效的方法可以实现排名恢复,且与准确度呈对数关系。值得注意的是,一种随机算法仅需期望值中的每个上下文常数次比较即可实现此目标,并通过使用Arena数据的合成和半合成实验进行了验证。
-
AI模型排行榜Arena融资2亿美元,估值31亿美元 · 追踪3个来源
Arena,一个用于比较和评估AI模型的平台,已获得2亿美元B轮融资,公司估值达到31亿美元。本轮融资由Lightspeed Venture Partners和Khosla Ventures联合领投,估值较上一轮几乎翻倍。Arena最初是加州大学伯克利分校的一个研究项目,现已推出其对齐指数(Alignment Index)预览版,根据各大AI实验室的系统卡定义对模型进行安全性和对齐性评分。
-
AI排行榜Arena以31亿美元估值融资2亿美元,新增对齐追踪 · 追踪4个来源
AI排行榜Arena背后的公司LMSys Org已获得2亿美元B轮融资,公司估值达到31亿美元。这标志着其估值在短短10个月内几乎翻倍,此前于今年早些时候完成了1.5亿美元的A轮融资。该公司的平台通过众包方式对AI模型进行排名,每月拥有数千万访问量,由于企业寻求超越传统基准的更好AI模型评估方法,该平台实现了显著增长。Arena还推出了一个新的对齐排行榜,用于衡量欺骗和未经授权行为等问题。
-
Fireworks AI 估值飙升至 175 亿美元,人工智能成本不断攀升
Fireworks AI 经历了显著增长,预计 2025 年预订收入达 2.5 亿美元,估值达到 175 亿美元。这标志着其估值在过去九个月内增长了三倍。该公司 50 岁的首席执行官 Louis Qiao 成为新晋亿万富翁,凸显了其成功。
-
Wizards of the Coast 工会要求停止使用生成式AI · 已追踪2个来源
代表 Wizards of the Coast(以《龙与地下城》和《万智牌》闻名)员工的工会已扩大范围,纳入更多团队。该扩大后的工会正正式要求 Hasbro 和 Wizards 的领导层停止在公司内部实施生成式AI技术。该工会隶属于美国通信工作者联合会,现已包括 Arena 团队以及其他《龙与地下城》和《万智牌》的员工。
-
Google 发布 Nano Banana 2.1,图像生成成本减半
Google 发布了其新的图像生成模型 Nano Banana 2.1,该模型显著降低了图像输出成本,与前代产品相比价格约减半。虽然该模型利用了 Gemini 3.6 Flash 并在某些基准测试中表现出竞争力,但其前代 Pro 版本在实际应用中被认为能生成更高质量的图像。Nano Banana 2.1 在 Arena 基准测试中也攀升至第五位,但仍落后于 GPT Image 2.5。