schema
PulseAugur coverage of schema — every cluster mentioning schema across labs, papers, and developer communities, ranked by signal.
- 2026-07-16 research_milestone A new harness named 'Schema' achieved a 99% score on the ARC-AGI-3 benchmark using Claude Opus 4.8 and Fable 5. 来源
3 天有情绪数据
-
LLM提取审计跟踪：版本化模型和跟踪人工更正
第一篇文章讨论了对LLM提取进行版本化的重要性，以便准确地追溯错误。它强调存储API返回的确切模型标识符，而不仅仅是别名，并将解码参数（如temperature和max tokens）包含在版本戳中。第二篇文章详细介绍了如何为字段更正构建审计跟踪，重点关注捕获谁进行了更改、何时进行的以及他们查看了什么。它提出了一种结构化记录，包括稳定的审阅者ID、先前的值和来源，以及所审查内容的证据，并强调了数据完整性的仅追加方法。
-
Kimi K3挑战前沿模型；GPT-5.6智能体导致数据丢失
Moonshot AI发布了Kimi K3，一个拥有2.8万亿参数的模型，其能力可媲美顶尖西方AI，并已通过API提供服务，计划于7月开放权重。该模型在编码基准测试中表现出色，并展示了令人印象深刻的自主能力，例如设计芯片和编译GPU。与此同时，OpenAI的GPT-5.6在数学推理方面表现出先进能力，能够解决复杂的定理，但也引发了重大的安全担忧，因为其自主智能体在非沙盒环境中意外删除了用户文件。这凸显了先进AI智能体在应用层面安全方面…
-
Moonshot 发布 Kimi K3；Google 延迟 Gemini 3.5 Pro；新工具提升 ARC-AGI 性能
Moonshot 发布了 Kimi K3，这是一个拥有 2.8 万亿参数的多模态模型，具有 100 万 token 的上下文窗口，并针对更快的长上下文解码和代理编码进行了优化。据报道，Google 因性能问题（尤其是在编码方面）推迟了其 Gemini 3.5 Pro 模型，尽管该公司表示该模型仍在进行合作伙伴测试。此外，一个名为 Schema 的新工具已被开发出来，通过让模型根据游戏机制编写、测试和执行程序，来提高前沿模型在 ARC-…
-
新型“Schema”工具将ARC-AGI-3分数提升至99%，使用Claude Opus 4.8
一款名为“Schema”的新型AI工具已被开发出来，它显著提高了在ARC-AGI-3基准测试上的性能。当与Anthropic的Claude Opus 4.8和Meta的Fable 5结合使用时，“Schema”在该基准测试上取得了99%的分数。另一项使用OpenAI的GPT-5.6 Sol模型的独立测试得分为95.35%。Schema的改进源于其在处理观察、测试预测和执行计划方面的新颖方法，而不是改变底层模型的权重。
-
Schema 框架声称在 ARC-AGI 3 基准测试中取得高分
一个名为 Schema 的新框架已被推出，旨在评估大型语言模型。早期报告表明，Schema 在使用 Fable+4.8 和 GPT 5.6 Sol 等模型时，在 ARC-AGI 3 基准测试中分别取得了 99% 和 95.35% 的令人印象深刻的分数。然而，一项澄清表明这些分数是在公共数据集上取得的，在保留集上的表现仍有待观察。
-
AI代理的失败凸显了面向操作员设计的必要性
一个用于法律合同提取的AI代理经历了三次不同的失败，揭示了“面向操作员”的设计超越了技术规范。最初的问题包括模式验证通过但数据不正确，以及重试循环生成看似合理但错误的默认值。最严重的失败源于分布变化，由于未见过的数据模式，该代理在处理收购子公司提供的合同方面表现不佳。解决方案包括将模式有效性与内容准确性分开，对内容提取失败实施人工审查，并在部署前使用操作员自己的数据建立基线准确性。
-
MLOps：用于模型稳定的条件化特征存储版本控制
本文讨论了在特征存储模式演进时，在MLOps中保持模型稳定性的挑战。它强调了需要强大的版本控制策略，以防止模型因意外的模式更改而中断。作者提出了条件化特征存储版本控制作为一种解决方案，以确保模型保持功能性和可靠性。
-
LLM结构化输出可能掩盖虚假数据，通过模式检查
LLM的结构化输出模式可以通过生成看似合理但错误的值来掩盖数据提取错误，即使输出格式有效。这是因为模型可能会编造数据来满足模式要求，而不是表示不确定性或缺失信息。一种常见的失败模式是，当LLM提供一个完整、格式良好的JSON响应，其中包含编造的值（例如，一个不可能的分数）时，下游系统可能会将其作为事实摄取。