Delta Inference Engine 已更新至 0.93 版本,为 DeepSeek-V4.1-Flash-1017 模型带来了显著改进。此次更新提高了在单个 RTX 3090 显卡上的性能,提供了更快的首个 token 生成速度和在较低 RAM 要求下更好的质量。现在支持以全速运行新的 Unsloth 量化,该引擎还包括基础多 GPU 功能和公开的持续集成系统。 AI
影响 提高了本地 LLM 部署的可用性和性能,特别是对于硬件有限的用户。
排序理由 对特定模型的推理引擎进行更新,而非新的前沿模型发布。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →