CodebaseRAG

CodebaseRAG认为，RAG系统需要评估门槛，而不仅仅是演示

本文认为，检索增强生成（RAG）系统需要严格的评估，而不仅仅是简单的演示。作者介绍了CodebaseRAG，一个开源的RAG引擎，它设计了一个评估门槛。该门槛使用至少40个问答对的“黄金数据集”来衡量检索性能，特别是recall@5，如果性能下降到低于承诺的0.409基线，则构建失败。该系统采用六边形架构，允许轻松替换组件，如向量存储（pgvector、Qdrant）或嵌入模型（Ollama、Anthropic），而不影响核心功能。