一个研究团队已成功地从头开始训练了一个AI基础模型,花费约1500美元,挑战了此类项目需要数百万美元的观念。这个开源模型采用Apache 2.0许可证发布,拥有2.5亿个参数,并在800GB数据上进行了训练。这项成就表明,相对适度的资源也可以开发出重要的AI模型。 AI
影响 证明了可以用显著降低的成本开发强大的AI模型,可能使基础模型训练的访问民主化。
排序理由 该集群描述了从头开始以低成本训练基础模型,这是一项研究成就。[lever_c_demoted from research: ic=1 ai=1.0]
在 Mastodon — mastodon.social 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →