PulseAugur
中
实时 10:24:16
实体 eval dataset

eval dataset

PulseAugur coverage of eval dataset — every cluster mentioning eval dataset across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 0
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_366756 ·

    LLM 提示评估需要固定的数据集以确保有效比较

    本文强调了在比较大型语言模型(LLM)的不同提示时,“固定”评估数据集的关键必要性。固定可确保每次提示比较都使用完全相同的输入和预期输出集,从而防止因数据集漂移而导致结果产生误导。作者提出了一些实用的方法,例如在 Git 中对文件进行版本控制、记录文件哈希值、使用种子固定采样方法、存储全面的运行元数据以及实施检查以在数据集不匹配时发出明确的失败警告。