PyTorch
PulseAugur coverage of PyTorch — every cluster mentioning PyTorch across labs, papers, and developer communities, ranked by signal.
28 天有情绪数据
-
开发者为扭蛋游戏构建定制 Rust 机器学习模拟器
一位开发者创建了 Talos-XII，一个用于游戏《明日方舟：终末地》扭蛋系统的命令行模拟器。该模拟器使用了一个定制的自动微分引擎和一小型神经网络栈，包括 MLP、Dueling DQN 和 PPO，来模拟游戏的不确定性和决策制定，而不是依赖静态概率表。该项目完全用 Rust 构建，不依赖 PyTorch 或 TensorFlow 等外部机器学习框架，并支持运行时 SIMD 分派以优化跨不同 CPU 架构的性能，并可选支持 GPU。开…
-
作者在10分钟内使用自定义CLI微调了DistilBERT模型
作者详细介绍了在严格的10分钟内微调AI模型（具体是在AG News数据集上微调DistilBERT）的过程。这包括使用一个名为Crunr的自定义CLI工具，从零开始在一台租用的GPU上管理依赖项和训练过程。关键步骤包括建立未训练模型的基线性能，进行三个epoch的微调，并在每个epoch后评估性能，根据宏观F1分数保存最佳检查点。作者强调了正确固定PyTorch和其他依赖项以匹配特定GPU架构的重要性，以避免常见的错误和浪费计算时间。
-
InferNet利用GPU配置文件进行DNN架构推断
研究人员开发了InferNet，一种通过分析聚合GPU配置文件来推断深度神经网络（DNN）架构的新颖方法。该技术绕过了复杂、细粒度数据分析的需求，而是利用了GPU内核调用和内存事件等粗粒度系统级信息。InferNet能够准确预测通用架构家族和特定变体，在跨不同AI框架、DNN类型和硬件平台的评估中实现了100%的模型提取准确率。
-
浏览器窗口大小影响 Stable Diffusion 生成速度
一位用户发现，用于访问 Stable Diffusion Web UI 的浏览器窗口大小会显著影响生成速度，与较小窗口相比，最大化或全屏窗口速度慢 20-40%。这种速度下降在 Forge 和 ComfyUI 等各种 Stable Diffusion 界面以及不同的浏览器和驱动程序版本中都有观察到。用户推测这可能是由于 Windows 桌面合成器 (DWM) 与 CUDA 计算上下文之间的争用，但需要进一步测试来确认。
-
AMD 发布 ZenDNN 6.0，用于 Ryzen 和 EPYC CPU 上的 AI 推理
AMD 发布了 ZenDNN 6.0，这是其旨在加速 Ryzen 和 EPYC CPU 上 AI 推理的软件库的更新版本。此版本在 AMD Zen 6 处理器正式发布之前推出，并提供了 Intel oneAPI 的替代方案。ZenDNN 6.0 通过插件与 TensorFlow 和 PyTorch 等流行的机器学习框架集成。
-
Google 发布 Gemma 2 开源大语言模型系列，采用注重效率的架构
Google 发布了 Gemma 2，这是其开源大语言模型系列的更新版本，提供 9B 和 27B 参数规模。这些模型采用了重要的架构变更，包括混合注意力机制和分组查询注意力 (GQA)，旨在提高推理效率并降低计算成本。Gemma 2 模型设计用于在 NVIDIA H100 GPU 或 Google TPU 等硬件上高效运行，使其对开发者和研究人员进行微调和部署更具可访问性。
-
Robbyant发布LingBot-Video，一款开源MoE视频生成模型
Robbyant发布了LingBot-Video，这是一款开源的混合专家（MoE）视频生成模型，专为具身智能设计。该模型在包含网络视频和具身数据的海量数据集上进行训练，采用高效的MoE架构，推理速度比以往模型快约三倍。LingBot-Video集成了多奖励系统，优先考虑输出的美学质量、物理合理性和任务完成度。
-
LLM推理防火墙在生成前阻止不安全令牌
resk-secure 开发了一种名为 LLM 推理防火墙的新方法，旨在通过阻止生成不安全令牌来增强大型语言模型的安全性。该方法在 logits 层面运行，在令牌采样之前修改模型的输出概率。通过将安全规则编译成 GPU 兼容的位掩码，防火墙可以有效地将禁止的令牌（包括可能跨越令牌边界绕过标准过滤器的令牌）归零。
-
用于审计基于梯度的优化方法的新型微积分语言
研究人员引入了一种名为 Geometric--Nongeometric Optimizer Calculus 的新型模块化语言，用于分析基于梯度的优化方法。该框架允许在 oracle、budget 和 state 等各种约束下审计可达梯度方法。一项关键发现是，完全的正定几何可以表达严格下降方向，并且该论文包含了用于审计矩阵-算子更新的 PyTorch 候选等原型。
-
TorchJD 库简化了 PyTorch 中的多损失训练
TorchJD 是一个旨在简化使用多种目标训练 PyTorch 模型的新库。它实现了各种现有的标量化和雅可比下降方法，使用户能够轻松尝试不同的组合多种损失的方法。该项目已被 PyTorch 生态系统接受，并正在寻求社区贡献以进一步开发其功能。
-
新的开源框架助力SNN硬件设计探索
研究人员开发了一个开源框架，用于模拟和探索混合信号脉冲神经网络（SNN）的设计空间。该工具将器件级非线性直接集成到PyTorch中进行训练和推理，允许优化物理突触参数而非抽象权重。该框架支持多种神经元模型，包括Leaky Integrate-and-Fire、Hodgkin-Huxley和Axon-Hillock，以及非易失性模拟突触。它已在N-MNIST、DVS Gesture和Spiking Heidelberg Digits等基…
-
开源工具包VLMEvalKit发布，用于评估多模态模型
研究人员开发了VLMEvalKit，一个使用PyTorch构建的开源工具包，用于评估大型多模态模型。该工具包支持超过450种模型配置和330个基准测试，简化了数据准备、推理和指标计算的过程。它还托管了OpenVLM排行榜，以跟踪多模态学习研究的进展。
-
新的自适应Adam优化器提高了深度学习求解偏微分方程的收敛性
一篇新论文介绍了一种学习率自适应的Adam优化器变体，旨在提高深度学习的收敛性，特别是在求解偏微分方程方面。所提出的方法根据目标函数的经验估计来调整学习率，旨在克服标准Adam和具有恒定学习率的SGD的局限性。数值模拟表明，与默认的Adam优化器相比，目标函数值减少得更快，并且理论分析为某些自适应SGD变体收敛到全局最小值的严格证明提供了依据。
-
新内核通过融合 SwiGLU 激活来提高大语言模型推理速度
研究人员开发了新的技术，通过在瓦片级别将 SwiGLU 激活函数直接融合到 GEMM 操作中，来加速大语言模型 (LLM) 的推理。这些方法使用为 NVIDIA H100 GPU 定制的 CUTLASS 内核实现，显著减少了中间张量物化的相关开销。在 Qwen 2.5 模型上的评估显示，与标准的 PyTorch 实现相比，速度提升高达 2.47 倍，实现了更高的峰值 BF16 利用率，并展示了优于 cuBLAS 等现有库的数值性能。
-
AI 模型 Fable 编写更快的 GPU 内核并自动化在线工作 · 跟踪 2 个来源
一款名为 Fable 的新 AI 模型已展示出编写高效 GPU 内核的能力，在 Nvidia RTX Pro 6000 Blackwell Workstation Edition 上实现了比优化后的 PyTorch 基线快 18.71 倍的速度。在 KernelBench-Mega 基准测试中，此性能超越了 Claude-Opus-4.8、GLM-5.2 和 GPT-5.5 等其他领先模型，表明 AI 在研发自动化方面取得了进展。此外…
-
公共金融机器学习实验室展示MLOps，但不泄露交易秘密
作者正在构建一个公共金融机器学习实验室，以展示生产级机器学习和强化学习工作流。该实验室将侧重于展示验证、模型服务、监控和风险感知评估等工程实践，而不是泄露专有的交易策略或信号。将要展示的关键方面包括泄露感知验证、前向评估、如CVaR等风险指标，以及如QR-DQN等分布强化学习模式。
-
Anthropic 全球招聘并探索与三星合作制造定制 AI 芯片
Anthropic，以其 AI 助手 Claude 而闻名，正在积极招聘包括研究、工程、政策、运营和业务在内的广泛职位。该公司由前 OpenAI 研究员创立，强调 AI 安全，并提供有竞争力的薪酬、股权和福利，包括为国际候选人提供签证担保。另外，据报道 Anthropic 正在与三星讨论开发定制 AI 芯片，旨在利用三星的半导体专业知识来优化机器学习硬件，从而提高处理速度和能源效率。
-
VLMs 实现开放词汇视频场景图生成
一种新的视频场景图生成（SGG）方法利用视觉语言模型（VLMs）来创建视频内容的结构化、机器可读的描述。与依赖固定词汇的传统 SGG 方法不同，这种方法使用 Qwen2.5-VL 等开放词汇 VLMs 直接从视觉和语言线索生成描述。该过程包括从视频中选择关键帧，然后使用 VLM 识别对象、人物及其关系，形成一个可编程分析的图。
-
开源工具 Tensey 验证神经网络张量形状
一位开发者创建了一个名为 Tensey 的开源可视化编辑器，用于验证张量形状并估算神经网络的计算需求。该工具旨在在消耗大量 GPU 资源之前捕获设计错误，例如不兼容的残差连接或不匹配的线性层。Tensey 支持 63 种操作，具有正确的形状推断功能，并可以导出可运行的 PyTorch 代码。
-
构建生产级医疗AI的指南，侧重于失败处理
本文提供了构建生产级AI系统的全面指南，特别是在医疗保健领域。它强调“为失败而设计”的方法，超越了单纯的演示，实现了健壮的实施。该指南涵盖了从初始问题构建、确保数据管道中的HIPAA合规性，到为安全可靠的AI部署建立必要护栏的关键方面。