PulseAugur
中
实时 12:29:04
实体 Cell-Wise LoRA-MoE

Cell-Wise LoRA-MoE

PulseAugur coverage of Cell-Wise LoRA-MoE — every cluster mentioning Cell-Wise LoRA-MoE across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
0
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 1
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 1 条
  1. RESEARCH · CL_128453 ·

    Localized LoRA-MoE 框架增强参数高效微调

    研究人员推出了一种新颖的参数高效微调框架 Localized LoRA-MoE，该框架结合了空间分块和自适应路由。该方法旨在解决现有方法（如 LoRA）的局限性，这些方法可能存在整体瓶颈和梯度冲突问题。提出的架构，即 Block-Wise LoRA-MoE 和 Cell-Wise LoRA-MoE，分别提供集中的宏路由和分散的微路由，以提高模型的适应性和对故障的弹性。基准测试表明，这些方法优于静态基线，为动态模型适应提供了稳健的解决方案。