NFCorpus
PulseAugur coverage of NFCorpus — every cluster mentioning NFCorpus across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
Glance 将重排功能集成到生成式 AI 模型中,降低了开销
研究人员开发了 Glance,这是一种新颖的方法,将重排功能直接集成到生成模型中,无需单独的重排模型。该方法使用轻量级的决策适配器和指针头来对来自共享预填充的候选段落进行评分,从而减少了内存和处理开销。Glance 在单个 9B 主干上运行,在 MS MARCO、SciFact 和 NFCorpus 等基准测试中取得了有竞争力的性能,并提高了 HotpotQA 上的答案 F1 分数。
-
Glance AI模型将重排和生成整合到单一骨干网络中
研究人员开发了Glance,一个将重排和生成整合到单一AI模型中的新颖系统。该方法使用轻量级的决策适配器和指针头来对共享预填充中的候选段落进行评分,减少了对独立重排模型的需要,并降低了内存开销。Glance基于一个9B骨干网络构建,在经过少量微调后,在检索和问答基准测试中取得了有竞争力的性能,证明了其效率和有效性。
-
新的LLM-IRA方法改进了检索排名聚合
研究人员开发了LLM-IRA,一种用于聚合多个检索系统排名的创新方法,特别适用于RAG应用。该方法利用大型语言模型对高分歧文档进行成对判断,并交互式地学习融合权重。在BEIR基准和TREC深度学习轨道上的实验表明,LLM-IRA可以匹配或超越强大的静态融合基线,在多个基准上实现统计学上的显著性,且LLM调用次数极少。
-
新的PRIME框架提高了LLM代理文档检索效率
研究人员推出PRIME框架,旨在提高LLM代理结构化文档检索的索引端表示质量。PRIME采用两种主要方法:一种由LLM驱动的语义重组(Semantic Restructuring)通道,将文档组织成密集段落;另一种是确定性的元数据合成与分层检索(Metadata Synthesis and Hierarchical Retrieval)通道,用于结构化段落访问。与传统的分块方法相比,该方法显著降低了计算成本和向量数量,同时提高了检索准确性。
-
MRVQ 提供具有更小内存占用的弹性向量搜索
研究人员开发了 Matryoshka Residual Vector Quantization (MRVQ),这是一种新颖的向量搜索方法,可同时优化维度和速率弹性。MRVQ 允许单个索引通过截断残差阶段或嵌入坐标来服务各种(维度、速率)对,与现有方法相比,显著减少了内存使用量。虽然 MRVQ 提供了可观的内存节省,但检索质量会略有下降,尽管在匹配的代码大小下,其性能优于 PQ 和 OPQ 等其他技术。研究还指出,QINCo2 模型在高…
-
双曲几何检索系统赋能边缘设备上的RAG
研究人员开发了一种新颖的混合检索系统,该系统利用双曲几何来实现边缘设备上的检索增强生成(RAG)。该系统将词嵌入投影到双曲空间,从而能够高效地索引和查询文档。通过结合BM25词汇评分和洛伦兹内积相似度,该系统在多个基准数据集上取得了具有竞争力的NDCG@10分数。该设计优先考虑实时索引和资源高效查询,使其适合在计算能力有限的设备上部署。
-
新的RAG防御框架应对数据投毒攻击 · 已追踪3个来源
研究人员开发了新的防御框架,以保护检索增强生成(RAG)系统免受数据投毒攻击。RAGuard在两篇论文中提出,采用分层方法,包括对抗性检索器微调和一种新颖的零知识推理补丁(ZKIP),该补丁使用反事实解码来检测恶意文档,而无需标签。TriShieldRAG提供了一个三阶段的纵深防御策略,包括摄取卫士、检索评分器和跨LLM共识阶段,以对抗知识损坏。这些方法旨在显著降低或消除投毒攻击的成功率,否则这些攻击可能会操纵RAG系统提供错误的答案。