Colibri 是一款新推出的开源 AI 引擎,旨在让用户在仅需 25GB RAM 的消费级硬件上运行大型语言模型,例如 GLM-5.2(一个 744B 参数的混合专家模型)。Colibri 完全用 C 语言编写,没有任何依赖项,通过从磁盘流式传输模型专家来实现这一目标。这项创新使得计算资源有限的用户也能更方便地使用强大的 LLM。 AI
影响 使硬件资源有限的用户更容易使用强大的 LLM。
排序理由 该集群描述了一个用于运行 AI 模型的新软件工具,而不是一个核心 AI 模型发布或研究。
在 Mastodon — sigmoid.social 阅读 →
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →