PulseAugur
实时 21:59:36
实体 Zunhai Su

Zunhai Su

PulseAugur coverage of Zunhai Su — every cluster mentioning Zunhai Su across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
0
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 1
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 1 条
  1. RESEARCH · CL_77397 ·

    综述详解Transformer“注意力汇聚”问题及解决方案

    一篇新近发表在arXiv上的综述论文详细介绍了Transformer模型中“注意力汇聚”(Attention Sink)现象。该问题指的是模型不成比例地关注无信息量的token,这会使模型的可解释性复杂化,并可能导致幻觉等问题。该综述将现有研究归类为利用、解释和缓解策略,以指导Transformer架构的未来发展。