Latent Terms

新方法从密集检索模型中提取适用于BM25的稀疏特征

研究人员引入了一种名为Latent Terms的新方法，该方法表明密集检索模型可以分解为适用于传统BM25评分的稀疏特征。该技术应用于使用稀疏自编码器的冻结检索器，在无需检索特定调整或监督的情况下，提取了具有齐夫分布统计特征的潜在词汇。Latent Terms在LIMIT基准测试上，其性能与现有的单向量评分方法和SPLADE变体相当或更优，并显著优于其基础模型。