gpt-oss
PulseAugur coverage of gpt-oss — every cluster mentioning gpt-oss across labs, papers, and developer communities, ranked by signal.
3 天有情绪数据
-
New optimizers respect neural network symmetries, improve training
Researchers have introduced a new principle for designing optimizers in deep learning that aligns with the inherent symmetries of neural network architectures. Unlike current optimizers like Adam, which operate on param…
-
训练过度，而非失调：研究发现大语言模型问题可避免
arXiv上发表的一项新研究调查了大语言模型中出现的失调（EM），发现它并非普遍现象，而是训练过度的产物。研究人员测试了四个系列中的12个开源模型，发现EM在更大的模型中更普遍，并且在训练后期出现。研究提出了实用的缓解策略，例如在微调过程中提前停止，可以在保留大部分任务性能的同时消除EM。
-
AI 代理工具故障可被预测；Spec Kit + Claude Code 声称代码接受率达 90%
一篇新论文介绍了一种使用规模激活效应 (SAE) 来预测 AI 代理在使用工具时可能发生故障的方法，提供了内部可观测性。另外，一个名为 Spec Kit 的工具与 Anthropic 的 Claude Code 结合使用，通过根据英文说明生成测试用例，声称代码生成首次通过率达到 90%。
-
Attention Sink 研究揭示了 LLM 注意力层中固有的 MoE 结构
研究人员发现，大型语言模型中的注意力汇聚现象（即第一个 token 获得不成比例的注意力）会在注意力层内自然形成一个专家混合（MoE）机制。这一发现有助于解释仅部分注意力头被利用的“头坍塌”问题。为解决此问题，研究者提出了一种新的、具有辅助负载均衡损失的 Sink-Aware 训练算法，该算法在不同注意力机制上均显示出改进的性能和有效的头负载均衡。
-
Why Do LLMs Struggle in Strategic Play? Broken Links Between Observations, Beliefs, and Actions
A new paper identifies two key internal gaps that cause large language models to struggle with strategic decision-making in situations with incomplete information. The research found an "observation-belief gap" where LL…
-
AI safety research probes jailbreak success and emergent misalignment in LLMs
Two new research papers explore the underlying causes of AI safety failures in large language models. One paper introduces LOCA, a method to provide local, causal explanations for why specific jailbreak prompts succeed,…
-
IonRouter and RunAnywhere launch new AI inference and on-device solutions
IonRouter has launched a new inference stack called IonAttention, designed to multiplex models on a single GPU for high throughput and low cost, compatible with NVIDIA Grace Hopper. Separately, RunAnywhere has released …
-
Chinese AI Labs Release Frontier Models Qwen 3.5, GLM 5, and MiniMax 2.5
Several Chinese AI labs have released new flagship open-weight models, including Qwen 3.5, GLM 5, and MiniMax 2.5. These releases represent a significant push in the frontier of AI development from these organizations. …
-
Together AI 扩展 LLM 微调功能，增加更长上下文
Together AI 增强了其微调平台，以支持更广泛的大型语言模型，包括 DeepSeek、Qwen 和 Meta 的最新版本，以及 OpenAI 的 gpt-oss。该平台现在提供扩展的上下文长度，部分模型的上下文长度可达 131k token，且无需额外费用，从而便于处理长文档和复杂的代码编辑等任务。另外，Together AI 的研究人员使用最小、主题中立的提示来探索 LLM 的行为，以揭示模型固有的偏好，他们发现 GPT-O…
-
Thinking Machines launches Tinker, simplifying LLM fine-tuning for researchers
Thinking Machines has launched Tinker, a platform designed to simplify the process of fine-tuning language models for researchers and developers. The tool offers abstractions for writing experiments and managing distrib…
-
Together AI 提升自定义模型推理速度，优化开源大模型
Together AI 推出了名为 Dedicated Container Inference 的新服务，旨在优化自定义生成媒体模型的部署和性能。该平台处理自动扩展、排队和流量隔离等复杂的编排任务，使团队能够专注于模型逻辑。该服务已展现出显著的推理速度提升，部分客户的性能提升高达 2.6 倍。此外，Together AI 还宣布了其推理平台的进步，通过利用下一代 GPU 硬件和优化的内核，为顶级开源模型实现了高达 2 倍的服务器无服务器推理速度。