Nemotron Labs发布了Dory1.0-4B,一个拥有40亿参数的语言模型,它采用了新颖的循环架构。该设计通过多次应用共享层块,有效地用推理计算换取更好的性能,从而提高了模型的准确性和令牌效率。Dory1.0-4B在各种基准测试中,尤其是在编码和智能体任务上,表现优于更大的模型,并且其检查点现已公开可用。 AI
影响 引入了一种新颖的循环架构,提高了效率和性能,可能影响未来的LLM设计。
排序理由 前沿实验室模型发布,附带系统卡。[lever_c_从frontier_release降级:ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- bfloat16
- Dory1.0-4B
- Gemma 4 12B
- Gemma 4 26B-A4B
- generative pre-trained transformer
- GGUF
- Hugging Face
- MXFP8
- Nemotron Labs
- NVFP4
- Nvidia
- Qwen3.5:9b
- Reinforcement Learning with Verifiable Rewards
- supervised fine-tuning
- transformer
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →