run_gate.py

LLM 提示词被视为代码，进行版本控制和发布门禁管理

本文提出了一种用于管理大型语言模型 (LLM) 提示词的健壮系统，将它们视为代码而非简单的配置文件字符串。作者主张在单独的文件中对提示词进行版本控制，类似于软件开发实践，以实现差异比较、审查和自动化测试。一个关键组成部分是发布门禁，它针对新提示词版本运行一小组真实世界案例，如果性能下降到基线以下，则构建失败。这种方法旨在防止 LLM 应用行为的静默回归，并确保模型升级也通过相同的严格测试和门禁流程。