PulseAugur
实时 11:02:30
实体 soft prompt

soft prompt

PulseAugur coverage of soft prompt — every cluster mentioning soft prompt across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_193842 ·

    软提示可使随机 Transformer 近似函数

    研究人员证明,在适当的软提示引导下,具有随机、未训练权重的单层 softmax 注意力网络可以近似紧致流形上的任何 Hölder 函数。这一发现表明,对于某些近似任务,预训练可能是可选的。该研究将 softmax 注意力与核方法联系起来,构建了显式的软提示,使冻结的 Transformer 能够模拟经典的 Nadaraya-Watson 核估计器。核回归的理论保证得以继承,从而实现了依赖于内在维度的速率的通用逼近定理,并揭示了提示范数…