PulseAugur
中
实时 12:42:29
English(EN) Colibrì proof-of-concept gains frontier-level 1.5-TB AI model — novel approach runs on only 25GB of RAM and shows promise for local AI setups Colibrì proof-of-c

Colibrì 概念验证模型在 25GB RAM 上运行巨大的 1.5TB AI 模型

一位名叫 Vincenzo(也称为 JustVugg)的意大利工程师开发了一个名为 Colibrì 的概念验证模型,该模型能够在一个仅有 25GB RAM 的普通 CPU 上运行一个 1.5TB、7440亿参数的 GLM-5.2 AI 模型。尽管目前的性能极其缓慢,每秒仅为 0.05-0.1 个 token,使其不适用于实时使用,但将模型组件分块加载到 RAM 的方法预示着本地 AI 设置的潜力。这种方法有可能使与 Anthropic 和 OpenAI 相当的高质量 AI 模型能够在消费级硬件上访问。 AI

影响 展示了一种在消费级硬件上运行大型 AI 模型的新颖技术,可能降低本地 AI 设置的门槛。

排序理由 在有限硬件上运行大型 AI 模型的概念验证。

在 Mastodon — fosstodon.org 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

Colibrì 概念验证模型在 25GB RAM 上运行巨大的 1.5TB AI 模型

本文如何被排名

Signal score
0 / 100
Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket
Research
在有限硬件上运行大型 AI 模型的概念验证。
Source corroboration
2 independent sources
Multiple independent publishers reporting the same story raises confidence that it's real and newsworthy.
Topics
model release, infra
Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance
High
Clearly on-topic for AI-industry coverage.
Story freshness
89 days old
Aged out of breaking-news scoring windows; ranking reflects the durable signal from the full source set.

完整方法见我们的编辑标准。

报道来源 [2]

  1. Tom's Hardware TIER_1 English(EN) · Bruno Ferreira ·

    Colibrì 概念验证模型达到前沿水平的 1.5 TB AI 模型 — 新颖方法仅需 25GB RAM 即可运行,预示本地 AI 设置的潜力

    Colibrì proof-of-concept gets a frontier-level AI model running on only 25 GB of RAM and a modest CPU

  2. Mastodon — fosstodon.org TIER_1 English(EN) · [email protected] ·

    Colibrì 概念验证模型达到前沿水平的 1.5 TB AI 模型 — 新颖方法仅需 25GB RAM 即可运行,预示本地 AI 设置的潜力 Colibrì 概念验证

    Colibrì proof-of-concept gains frontier-level 1.5-TB AI model — novel approach runs on only 25GB of RAM and shows promise for local AI setups Colibrì proof-of-concept gets a frontier-level AI model running on only 25 GB of RAM and a modest CPU https://www. tomshardware.com/tech-i…