JS divergence

新的WARP算法改进了RAG系统中的意见摘要

一篇新研究论文介绍了一种名为WARP的检索后算法，旨在提高从大型文档集合中进行意见摘要的准确性。与可能忽略少数观点或未能捕捉情感强度等现有方法不同，WARP对检索到的文档进行校准，以更好地匹配人口的意见分布。该算法利用Wasserstein-1距离，确保所选文档的情感强度分布与目标人群保持一致，解决了KL和JS散度方法的局限性。WARP在三个评论领域进行了测试，在低延迟的情况下显著降低了分布误差，并得到了LLM小组更倾向于生成的答案。