AssameseLM-E2B

arXiv上发布了新的20亿参数的Assamese语言模型

研究人员开发了AssameseLM-E2B，这是一个新发布的、拥有20亿参数的语言模型，专门为被认为是低资源的Assamese语言设计。该模型基于Gemma 4架构构建，采用了扩展的字节级BPE词汇表，显著提高了分词效率。通过持续预训练（Hybrid LoRA）和监督微调的过程，AssameseLM-E2B在Assamese语言任务上表现出更强的指令遵循和检索增强生成能力，优于通用基线模型。