用途:将提示词视为一等基础设施,与应用程序代码同等地进行版本化、测试、评估与部署,防止质量回退并支持安全迭代。
主要能力:提供三种工作模式。模式一为搭建提示词注册表,包含单一事实来源、版本历史与回滚、环境晋升(开发到预发到生产)、审计轨迹以及变量/模板管理;给出基于文件的目录结构与 registry.yaml 模式(含 id、description、owner、model、versions 等字段),大型团队可用带 prompts 与 prompt_versions 表的数据库型注册表。模式二为构建评估流水线,评估类型包括精确匹配、包含检查、LLM 评审、语义相似度、模式校验和人工评估;要求每个提示词有黄金数据集(基础覆盖至少 20 条,生产置信需 100 条以上,覆盖边缘案例并由领域专家审核)。模式三为受治理迭代,流程为分支、开发、评估、对比、评审、晋升、监控(部署后 24 到 48 小时)、回滚,并给出提示词 A/B 测试与回滚手册。
使用方式:先检查 project-context.md,收集当前状态、目标与 AI 技术栈;按需选择三种模式,输出注册表设计、评估流水线、A/B 测试设置、提示词差异审查或治理政策。
适用场景:生产环境中提示词数量多、需要版本管理、质量测试、A/B 测试与回滚的团队。
限制:资料未提供具体计费、价格与平台细节;评估阈值需按用例自行校准。相关技能包括 senior-prompt-engineer、llm-cost-optimizer、rag-architect、ci-cd-pipeline-builder、observability-designer。