PulseAugur
中
实时 10:09:26
实体 Function-vector heads

Function-vector heads

PulseAugur coverage of Function-vector heads — every cluster mentioning Function-vector heads across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_80064 ·

    LLM 函数-向量头分为“写者”和“取消者”

    研究人员在大型语言模型的函数-向量（FV）头中识别出两个不同的群体，挑战了这些头是同质群体的假设。通过采用保留符号的标准而非仅基于幅度的排序，他们发现 FV 头要么将正确的 logits 推高（写者），要么将其推低（取消者）。这种双重性质在多个模型家族和规模中都得到了观察，并且零剔除取消者可以提高准确性。