一位开发者创建了Tokenazire,一个命令行界面工具,旨在帮助用户确定他们的代码库是否能容纳进像Claude和ChatGPT这样的大型语言模型的上下文窗口。该工具扫描本地文件夹或GitHub存储库,使用tiktoken库计算token数量,并提供文件大小的颜色编码明细。它还可以计算项目占模型上下文窗口的百分比,并将整个代码库导出为单个文本文件,方便粘贴到LLM中。 AI
影响 简化了将大型代码库与LLM结合使用的过程,可能增加在代码相关任务中的应用。
排序理由 该集群描述了一个与现有LLM集成的新软件工具,而不是一个核心AI模型发布或研究。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →