实体
Abraham Chachamovits
Abraham Chachamovits
PulseAugur coverage of Abraham Chachamovits — every cluster mentioning Abraham Chachamovits across labs, papers, and developer communities, ranked by signal.
总计 · 30天
3
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
3
90 天内 3
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 3 条
-
新 arXiv 论文探讨 Bethe-Ansatz 在早期 Token 相关性中的应用
一篇新发表在 arXiv 上的论文介绍了一种在语言模型中构造并行 Token 提议的新方法。该研究提出使用源自 XXZ 链的坐标 Bethe-Ansatz 定律，该定律可保持 Token 的边际概率。这种方法与最大熵投影进行了比较，揭示了概率定律的差异，尤其是在特定的多站点配置中。该论文展示了接受前缀的推测性优势，并为目标对齐提供了精确公式，尽管它指出这些是理论发现，在语言模型或计算时间方面没有实际的性能提升。
-
AI研究论文未能证明过渡预测得到改进
一项探索旋转注意力中相结构特征的理论论文通过两项实证研究进行了测试，以确定这些特征是否能改进过渡预测。第一项研究涉及 1,136 个案例，发现与基线模型相比，在预测承诺或矛盾终点方面没有显著改进。第二项研究在开放模块上开发了十五层处理，也未能达到预先设定的进展标准。因此，官方选拔进展为 null，表明在预定义的规则下未发现预测的额外排名提升。
-
新的谱系框架分析语言模型中的旋转注意力
一篇新的研究论文介绍了一个谱系框架，用于分析Transformer语言模型中的旋转注意力。该框架超越了传统的向量几何，考察相位对齐、隐藏状态连续性和语义漂移。它提出，有序的隐藏状态序列（而不仅仅是词汇索引）适合进行谱分解，并将旋转位置嵌入（RoPE）注意力得分推导为幅度加权余弦项的总和。该论文还引入了复模态坐标和加权相干泛函，以区分表征连续性和执行边界可容许性。