研究人员开发了 RAG-PIBench,这是一个旨在评估检索增强生成 (RAG) 系统中提示注入检测有效性的新基准。该基准包含跨越不同训练、验证和测试集的 4,876 个上下文示例,并采用了带泄露感知的构建过程。评估显示,DistilBERT 模型取得了最高性能,F1 分数为 0.896,PR-AUC 为 0.968,尽管传统的 TF-IDF SVM 和逻辑回归等方法也显示出具有竞争力的结果。 AI
影响 该基准将有助于提高 RAG 系统在面对提示注入攻击时的安全性。
排序理由 该条目是一篇学术论文,详细介绍了一个新的 AI 安全基准。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- DistilBERT
- Hugging Face
- logistic regression model
- RAG-PIBench
- retrieval-augmented generation
- TF-IDF SVM
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →