Cactus Compute 推出了 Needle 2,这是一款紧凑型的 4500 万参数模型,专为工具调用和结构化数据提取而设计。该模型以其极小的占用空间而闻名,打包为 14MB 的二进制文件,运行仅需 28MB RAM,使其适用于没有专用 AI 硬件(如 GPU 或 NPU)的设备。Needle 2 实现了令人印象深刻的速度,在 Raspberry Pi 5 上每秒可处理多达 500 个 token,并在各种移动和混合现实设备上提供高效性能。 AI
影响 在低功耗、资源受限的设备上实现复杂的人工智能能力,将人工智能应用扩展到传统的云端或高端硬件之外。
排序理由 来自专注于高效推理的专业 AI 实验室的模型发布。 [lever_c_demoted from frontier_release: ic=2 ai=1.0]
在 Mastodon — mastodon.social 阅读 →
- A Controlled Study of Attention-Only Transformers
- Apple FM
- Apple Vision Pro
- arXiv
- Cactus Compute
- Cactus Quants
- FunctionGemma
- Meta Quest 3S
- Needle 2
- Raspberry Pi 5
- LFM2.5-230M
- Simple Attention Network
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →