LFM3 1.7b 模型因其在体积小的情况下表现出乎意料的强大能力而受到赞扬。用户注意到其速度惊人,一项基准测试显示在支持 CUDA 的 GPU 上每秒可处理超过 20,000 个 token。该模型还表现出卓越的连贯性,即使在高达 64k token 的大提示下也能保持,超出了人们对一个 17 亿参数模型的预期。 AI
影响 证明了小型高效模型可以实现高性能,这可能降低本地部署 AI 的门槛。
排序理由 用户对小型语言模型的评价。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →