一款名为 Sitemap to Markdown 的新工具，作为 Apify Actor 构建，旨在简化将网站内容转换为干净 Markdown 以用于检索增强生成（RAG）管道的过程。该工具利用网站的站点地图来识别和下载主要内容，去除导航和页脚等样板元素。它提供增量同步功能，意味着它只重新处理自上次运行以来发生更改的页面，并且可以将内容分割成适合 RAG 的块，输出 llms.txt 和 llms-full.txt 等文件，以便轻松集成到 LLM 平台。 AI
影响 通过自动化网站内容提取和清理，简化了 LLM 应用程序的数据准备工作。
排序理由 该条目描述了一个新的软件工具及其功能。
- Apify Actor
- htmx
- Joe Fioti
- llms.txt
- retrieval-augmented generation
- robots.txt
- Sitemaps
- Sitemap to Markdown
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →
