monkeypatching

开发者提出自定义基准测试，用于将编码任务路由到免费或付费的 AI 模型

一位开发者提出了一种实用的方法，用于确定哪些编码任务可以可靠地由免费 AI 模型处理，哪些需要付费模型。该方法包括使用来自开发者自己近期工作中的任务（例如重构、错误修复或编写测试）来创建个性化的基准测试套件。该套件以 YAML 格式编写，包含可验证的结果，并针对候选模型运行。然后按任务类别汇总结果，以构建路由表，指导开发者何时使用免费模型以及何时选择更强大的付费解决方案。