42rows

wiki42 工具将 markdown wiki 编译成 RAG 系统

由 42rows 开发的开源工具 wiki42 旨在将 markdown wiki 转换为适合检索增强生成 (RAG) 系统的块。与基于 token 数量分割文本的通用分块器不同，wiki42 将每个 wiki 页面视为一个单独的块，从而保持语义完整性。它还将 YAML frontmatter 解析为元数据，并解析内部 wikilinks 以增强图查询功能，并开箱即用地提供多语言嵌入。