Reference Abstraction

提出新的文本摘要抽象性指标 · 跟踪到2个来源

研究人员引入了新的指标——参考抽象（RA）、摘要抽象（SA）和抽象比（AR）——以更好地评估文本摘要模型的抽象性。这些指标旨在量化生成摘要在多大程度上偏离了简单复制源文本，超越了ROUGE等传统度量方法。使用BART-large-cnn和Pegasus-xsum等模型在XSum数据集上进行的经验验证表明，这些指标可以有效地区分抽取式和抽象式摘要方法，其中抽象比还指出了潜在的幻觉问题。