PulseAugur
实时 08:11:57
实体 Xin Yu

Xin Yu

PulseAugur coverage of Xin Yu — every cluster mentioning Xin Yu across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_171967 ·

    PrunedLoRA框架通过结构化剪枝增强LLM微调

    研究人员推出了一种新颖的框架PrunedLoRA,旨在提高大型语言模型参数高效微调的效率。该方法利用结构化剪枝从过参数化的初始化中导出具有高度代表性的低秩适配器。与强制固定低秩预算的先前技术不同,PrunedLoRA在微调过程中动态移除不太关键的组件,从而实现自适应秩分配。该框架包括一种基于梯度的剪枝策略,并对鲁棒性进行了理论分析,证明了其优于基于激活的剪枝。在实践中,PrunedLoRA在包括数学推理和代码生成在内的各种自然语言处理…