PulseAugur
实时 13:00:22
实体 Glitch Tokens in Large Language Models: Categorization Taxonomy and Effective Detection

Glitch Tokens in Large Language Models: Categorization Taxonomy and Effective Detection

PulseAugur coverage of Glitch Tokens in Large Language Models: Categorization Taxonomy and Effective Detection — every cluster mentioning Glitch Tokens in Large Language Models: Categorization Taxonomy and Effective Detection across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_249770 ·

    新研究发现大型语言模型中的“脆弱标记”在上下文中会失效

    研究人员在大型语言模型中发现了一种“脆弱标记”(Fragile Tokens),这些标记在单独呈现时可以被正确复现,但在更大的文本序列中则会失效。这些标记在周围文本中可能被删除、替换、截断或翻译,导致在需要字面身份保留的任务(如引用或工具使用)中出现错误。对Qwen和OLMo系列多个模型的实验表明,使用基于概率的筛选方法可以检测到相当比例的这些脆弱标记,但预测确切的触发上下文仍然是一个挑战。