PulseAugur
实时 09:57:54
实体 Single-answer Atomic Long-form Target (SALT)

Single-answer Atomic Long-form Target (SALT)

PulseAugur coverage of Single-answer Atomic Long-form Target (SALT) — every cluster mentioning Single-answer Atomic Long-form Target (SALT) across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_128695 ·

    新基准评估长文本生成中 LLM 的不确定性

    研究人员推出了单答案原子长文本目标 (SALT) 基准,用于评估大型语言模型 (LLM) 在生成长文本时进行不确定性估计的能力。SALT 利用具有确定性地面真实情况的程序生成任务,无需人工判断即可进行单元级别的正确性和校准评估。使用 SALT 对 50 多个 LLM 进行的分析显示,虽然置信度排序在原子级别有所下降,但在更粗略的行级别单元中会出现可分离性。该基准还确定了两个错误驱动因素:来自损坏前缀的传播和因答案-上下文长度增加而导致…