实体
register tokens
register tokens
PulseAugur coverage of register tokens — every cluster mentioning register tokens across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
研究发现寄存器 token 可增强像素空间扩散 Transformer
研究人员调查了寄存器 token 在扩散 Transformer (DiTs) 中的效用,发现虽然 DiTs 不像 Vision Transformers (ViTs) 那样表现出相同的 patch-token 异常值,但它们仍然受益于寄存器 token。研究表明,寄存器在像素空间 DiTs 中比在潜在空间 DiTs 中更有效,可能通过在更高噪声水平下产生更清晰的特征图。在此发现的基础上,该论文介绍了寄存器引导(Register Gu…
-
寄存器令牌使 Vision Transformer 具有可解释性和性能提升
研究人员开发了一种使用寄存器令牌的新方法,以提高 Vision Transformer (ViTs) 在人脸识别方面的可解释性和性能。通过向初始块嵌入添加可学习的寄存器令牌,与标准的 CLS 令牌或连接块嵌入 (CPE) 方法相比,ViT-8R 模型展示了更结构化和可理解的注意力图。这种增强不仅减轻了可解释性伪影,还在 IJB-B 和 IJB-C 等大规模基准测试中取得了最先进的成果。