VIDRAFT POCKET 发布了一系列 1800 亿参数的混合专家模型 (MoE),专为消费级硬件设计,包括显存仅为 8 GB 的笔记本电脑。这些模型使用 GGUF 格式和 llama.cpp、Ollama、LM Studio 等标准运行时,无需云依赖或修改软件。旗舰模型 POCKET-Darwin-180B 在 4 位量化下实现了 87.65% 的质量保留率,该系列模型在 Hugging Face 上的下载量已超过 315 万次。 AI
影响 使大型语言模型能够在消费级硬件上运行,可能使先进的 AI 功能的访问民主化。
排序理由 发布了专为消费级硬件设计的特定模型系列,而非大型实验室的前沿模型发布。
- Hugging Face
- llama.cpp
- LM Studio
- NVIDIA H100
- Ollama
- POCKET-26B
- POCKET-Darwin-180B
- pocketpal
- VIDRAFT POCKET
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →