Databricks 发布了 DBRX,一个在性能上可与专有模型相媲美的开源大型语言模型。虽然它在许多基准测试中表现出色,但在计算资源效率方面并非最高。DBRX 在包含 13 万亿个 token 的海量数据集上进行了训练,并采用了独特的混合专家(mixture-of-experts)架构。 AI
排序理由 来自非前沿实验室的新开源模型发布。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
Databricks 发布了 DBRX,一个在性能上可与专有模型相媲美的开源大型语言模型。虽然它在许多基准测试中表现出色,但在计算资源效率方面并非最高。DBRX 在包含 13 万亿个 token 的海量数据集上进行了训练,并采用了独特的混合专家(mixture-of-experts)架构。 AI
排序理由 来自非前沿实验室的新开源模型发布。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
**Databricks Mosaic** has released a new open-source model called **DBRX** that outperforms **Grok**, **Mixtral**, and **Llama2** on evaluations while being about **2x more efficient** than Llama2 and Grok. The model was trained on **12 trillion tokens** using **3,000 H100 GPUs**…