实体 CAP-Correctness

CAP-Correctness

PulseAugur coverage of CAP-Correctness — every cluster mentioning CAP-Correctness across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

最近 · 第 1/1 页 · 共 1 条

RESEARCH · CL_231548 · Sep 1 · 15:06

新框架改进LLM答案正确性评估

研究人员开发了一个名为CAP-Correctness的新框架，以改进开放式问答（QA）系统（尤其是大型语言模型LLM）的评估。现有指标难以区分正确答案与不完整、矛盾或包含错误前提的答案。新框架引入了一个包含八个有序类别的语义正确性分类法，并发布了两个数据集CAP-Correctness（8.8k个示例）和CAP-Statements（11k个示例），以促进训练和评估。此外，还提出了一种名为CAP（Context-Aware Preci…