实体
Open-Weight LLM
Open-Weight LLM
PulseAugur coverage of Open-Weight LLM — every cluster mentioning Open-Weight LLM across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
2 天有情绪数据
最近 · 第 1/1 页 · 共 3 条
-
Unsloth 提供免费桌面应用,支持在消费级GPU上离线微调大语言模型
Unsloth 发布了一款免费桌面应用程序,允许用户在消费级GPU上对开源大语言模型进行微调。该工具声称在不影响准确性的前提下,可将训练速度提高一倍,并将VRAM使用量减少70%。这使得个人和小型企业能够使用自己的数据(例如公司特定术语或个人写作风格)完全离线地定制模型,而无需承担云计算成本。
-
通过权重空间的频谱指纹追踪 LLM 谱系
研究人员开发了一种新颖的方法,通过分析其权重空间来追踪开放权重大型语言模型(LLM)的谱系,这类似于人类的生物特征。该方法使用频谱指纹,特别是奇异值分布和子空间对齐,来区分独立训练的模型、不同的模型家族以及共享基础模型内的变体。对 110 多个 LLM 对进行的实验证实,权重空间的几何形状为识别模型的起源和演变提供了强大的信号,有助于溯源和供应链的完整性。
-
新研究:开源大模型防御易受简单越狱攻击
一篇新发表在arXiv上的论文表明,目前为保护开源大语言模型(LLMs)免遭有害使用而设计的防御措施,容易受到简单的越狱技术攻击。研究人员发现,像“擦除”(abliteration)和“预填充”(prefilling)等无需复杂优化的已知攻击,可以显著提高受保护模型上对抗性使用的成功率。为解决这一漏洞,该论文提出了一种“抗擦除微调”(ART)方法,可以集成到现有防御中,以降低这些更简单攻击的有效性。