实体 ANT-OR

ANT-OR

PulseAugur coverage of ANT-OR — every cluster mentioning ANT-OR across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_321924 · Oct 26 · 04:00

新的基准ANT-A和框架ANT-OR提高了LLM标注的一致性

研究人员推出了ANT-A基准测试，以解决当前LLM标注基准测试的局限性，这些基准测试通常未能考虑到人类标注者细微且有时不同的判断。这个新的基准测试包括特定任务的指南以及七个不同数据集上每个实例的五个独立人类标签。为了改进LLM标注系统，他们还提出了ANT-OR，一个多智能体框架，该框架使用从反馈中得出的对比决策规则来优化提示，与基线方法相比，一致性准确性提高了4.5个百分点。