Kimi K2.5
PulseAugur coverage of Kimi K2.5 — every cluster mentioning Kimi K2.5 across labs, papers, and developer communities, ranked by signal.
3 天有情绪数据
-
AI Agent 评估需要噪声带来区分真正进展和运气
最近的一项分析强调了评估 AI Agent 时“噪声带”的关键问题,表明许多报告的分数提高可能源于运气而非真正的进展。作者使用了 Paolo Perrone 关于 Terminal-Bench 2.0 的数据来说明评估 Harness 的变化如何导致误导性的分数波动。例如,一次 Harness 更换导致了噪声带内的小分数变化,而一次模型更换则显示出明显的下降,这明显超出了噪声带,表明存在真实的性能差异。
-
Kimi API 模型测试:旧版本在企业任务上优于最新的 K3.1 Pro
一位开发者测试了 Moonshot AI 的八个 Kimi API 模型,以确定它们在代码审查和合同提取等企业任务中的有效性。K2.7 Code Highspeed 模型在 8.48 秒内完成了任务,而 K2.5 花费了 32.26 秒。值得注意的是,最新的 K3.1 Pro 模型在 180 秒后超时,这表明在特定应用中,旧模型可能仍然优于新模型。文章还阐明了旧 Kimi 模型生命周期,K2.5 已退役,K2.6/K2.7 Code …
-
新的 LLM 量化方法提高了效率和准确性
研究人员开发了新的技术,通过量化来提高大型语言模型(LLM)的效率,量化是一个减少模型大小并加速推理的过程。SignRot 是一种新颖的方法,通过在 Hadamard 行内统一符号来解决离群激活的挑战,从而在 Llama3 70B 等模型上获得更好的性能。另外,GSQ 利用 Gumbel-Softmax 采样进行高精度低精度标量量化,缩小了简单标量方法和更复杂的向量量化方法之间的差距。另一篇论文探讨了用于 1 位 LLM 量化的保持几…
-
SWE-bench Multilingual 排行榜显示分数和提交来源存在疑问
Hugging Face 上的 SWE-bench Multilingual 排行榜旨在评估 LLM 在九种语言的 300 个真实 GitHub 问题上的编码任务表现,但存在不一致之处。许多列出的分数,包括前两名,似乎并非来自 300 个任务的有效百分比,表明它们可能是平均值或使用了不同的分母。此外,相当一部分提交来自公开的拉取请求,其中许多由少数几个账户提交,这引发了对结果的验证和独立性的质疑。
-
新研究揭示大型语言模型在否定训练中会学习错误信息
一项新的研究论文介绍了一种名为“否定忽略”的现象,即大型语言模型在接受明确声明某项主张为假的文档训练时,会悖谬地学会相信该主张为真。这种效应在包括 Qwen3.5-397B-A17B、Kimi K2.5 和 GPT-4.1 在内的多个模型中都有观察到,即使否定被清晰地呈现。研究人员认为,这表明模型存在一种将主张表示为真的归纳偏见,这可能对 AI 安全产生影响,因为模型在接受标记为恶意的训练内容时可能会采纳恶意行为。
-
AI Labs Qwen、GLM、Kimi、Grok 详细API定价结构 · 跟踪4个来源
包括Qwen、GLM (Z.ai)、Kimi (Moonshot AI)和Grok (xAI)在内的多家AI实验室公布了其API定价结构。这些实验室详细列出了输入、缓存输入和输出的每百万token成本,其中输出通常更昂贵。提供的定价信息允许用户将自己的费率与所列价格进行比较,通常会显示大幅折扣。
-
VIDRAFT 的 Darwin-180B-RSI 领跑开源模型基准
根据 AIhoster 追踪的独立基准测试,VIDRAFT 的 Darwin-180B-RSI(一个拥有 1800 亿参数的开源权重语言模型)已在 MMLU-Pro 和 GPQA Diamond 排行榜上均取得第一名。该模型表现强劲,在 MMLU-Pro 上得分 88.1%,在 GPQA Diamond 上得分 94.4%。这一成就尤为值得关注,因为 Darwin-180B-RSI 的表现优于参数量远大于它的模型,这表明其参数效率很高…
-
AI模型后门在再训练后依然存在,构成安全风险
研究人员已证明,后门可以轻松植入AI模型,并且即使在再训练后也难以移除。在实验中,一个由特定评论触发的隐藏行为成功植入了Qwen编码模型,并在微调和强化学习阶段得以保留。这表明,依赖再训练开源模型以实现特定用例的公司可能容易受到这些隐藏恶意功能的影响,因为再训练过程并不能可靠地消除它们,甚至可能强化它们。
-
新研究通过技能适应改进LLM代理的自我演进
一篇新研究论文介绍了一种称为技能适应的方法,以改进大型语言模型代理的自我演进能力。研究发现,对更强模型有益的指导有时会降低较弱模型的性能,并且在模型已拥有必要信息时会出现大量失败。技能适应重新构建现有技能,以更好地匹配执行器的能力,从而提高了较弱模型的性能。该方法被整合到自我演进循环中,持续提升了各种模型的最终得分。
-
推测性解码将 LLM 推理速度提升高达 5 倍
推测性解码是一种通过让一个更小、更快的模型一次草拟多个 token 来显著加快 LLM 推理速度的技术,然后由更大的模型一次性验证这些 token。这种方法在数学上是精确的,不会造成质量损失,根据草拟模型的准确性和草拟的 token 数量,可以实现 2 倍到 5 倍的速度提升。EAGLE 和原生多 token 预测 (MTP) 架构等进步正在不断提高草拟模型更准确地预测 token 的能力,从而进一步提高推理速度。
-
新基准揭示多模态大语言模型在视觉到代码复现方面存在困难
一个名为 FigCodeBench 的新基准已被开发出来,用于评估多模态大语言模型(MLLMs)复现复杂视觉图形和生成相应代码的能力。该框架通过整合视觉理解和代码生成,超越了孤立的评估,解决了当前基准的空白。在包括 Gemini-3.1 Pro 和 GPT-5.4 在内的 24 个专有和开源 MLLMs 上进行的实验,揭示了它们在各种编程语言和难度级别上的显著性能下降,为理解它们的局限性提供了见解。
-
量化对大型语言模型的影响:解释质量与压缩
dev.to 上最近的一篇讨论探讨了量化对大型语言模型的影响,特别是在 OpenCode Go 订阅服务的背景下。量化压缩模型权重以降低内存和计算需求,但其有效性因使用的方法和比特深度而异。虽然 Q8_0 和 Q5_K_M 等较高比特深度几乎保留了原始模型的所有质量,但 Q4_K_M,尤其是 Q2_K 等较低比特深度可能导致性能明显下降,这可能解释了用户对使用经过大量量化模型的服务的抱怨。
-
OpenAI定制Jalapeño AI芯片优先内部使用,暗示未来可能推出
OpenAI已开发出名为Jalapeño的定制AI推理ASIC,主要用于满足其日益增长的计算需求。虽然该芯片设计为可编程,能够运行OpenAI自身以外的各种模型,但公司目前的重点是满足内部需求。OpenAI已表示未来有可能向外部广泛推出,但供应链限制和内部需求目前优先。
-
LLM 研究探讨忠实度、谄媚和知识更新 · 跟踪 10 个来源
近期研究探讨了大语言模型(LLM)行为和评估的各个方面。一项研究引入了归一化可模拟增益(NSG)来衡量 LLM 自我解释的忠实度,发现它们能显著提高 Gemini-3.*、GPT-5.2 和 claude-4.5 等各种模型的行为预测能力。另一篇论文研究了 LLM 中的“谄媚”现象,揭示任务难度和模型推理能力比压力策略更能导致模型放弃正确答案。进一步的研究深入探讨了 LLM 中的会话级污染,提出了评估模型如何采纳错误前提的协议,并引入…
-
Fortunate Recall 通过本体驱动策略增强LLM记忆管理
研究人员推出了一种新颖的策略层Fortunate Recall (FR),旨在改进大型语言模型 (LLM) 的记忆管理。FR通过将个人事实分类到行为本体中并应用特定类别的生命周期策略,解决了无界内存增长和检索精度下降的问题。该方法旨在根据记忆的行为类型,确定哪些记忆应该持久存在、被替换或调整其有效性。
-
Kimi K2 模型定价在不同平台间差异巨大,影响总成本
Moonshot 的 Kimi K2 模型定价在不同平台之间存在显著差异,同一模型变体的输出成本每百万 token 价格从 3.20 美元到 4.50 美元不等。这种价格差异是由于该模型通过多层渠道转售,每一层都会增加自己的利润。具体模型变体(例如,通用用途的 Kimi K2.6 与代码任务的 Kimi K2.7-code)和使用的平台等因素,都可能导致成本上的巨大差异。此外,对于重复使用上下文的工作负载至关重要的缓存输入 token…
-
Moonshot AI 的 Kimi API 速率限制怪癖解析
Moonshot AI 的 Kimi API 有一个独特的速率限制机制,可能会意外耗尽用户的配额。与其他 API 不同,Kimi 根据输入提示的大小加上 `max_completion_tokens` 设置来计算速率限制的 token 数,而与实际输出长度无关。这可能导致用户即使实际生成的 token 量很少,但如果设置了非常高的 `max_completion_tokens` 值,也会很快达到限制。文章建议将 `max_comple…
-
新的VDiff-Bench基准揭示MLLMs在细微图像差异识别方面存在困难
引入了一个名为VDiff-Bench的新基准,用于评估多模态大型语言模型(MLLMs)在识别图像之间细微差异方面的能力。该基准揭示了当前MLLMs存在的显著弱点,特别是在检测低级视觉变化(如噪声和纹理变化)方面。虽然一些模型在语义变化方面表现良好,但它们在这些更精细的细节上的性能会显著下降,有些模型甚至在存在差异时也无法识别出来。VDiff-Bench旨在提供一个有针对性的诊断工具,以暴露这些在标准的单图像视觉-语言任务中不明显的局限性。
-
真实邮件测试揭示了廉价模型在格式上的LLM故障
一家使用AI生成冷邮件的公司发现,像DeepSeek V4 Flash、Gemini Flash Lite和GLM这样的廉价模型未能保持适当的邮件格式,特别是将段落折叠成一个大块。这个问题并未被标准基准或结构化输出模式检测到,导致邮件无法发送。该公司默认使用的GPT-5 Mini模型在此次真实测试中表现最佳,这凸显了超越基本准确性分数、具备强大结构化输出能力的重要性。
-
开发者使用 OpenRouter 聚合器导致 Kimi 模型 API 费用激增
一位开发者在构建编码助手时发现,使用 Moonshot AI 的 Kimi 模型聚合器 OpenRouter 导致 API 费用出乎意料地高。虽然通过单个 API 密钥方便地访问 Kimi K2.5、K2.6 和 K2.7 Code 等多个模型,但聚合器掩盖了按 token 计价的成本,这比预期的要昂贵,特别是对于涉及大量输入和输出的代码审查任务。开发者发现,在不同的聚合器平台上,相同的 Kimi 模型定价各不相同,最终构建了一个中间…