SuperAPI AI 工具集

eng-real-scenario-qa

通用与其它

查看项目

更新于 10-15 20:27

技能介绍

用途:在 Compozy 运行时上执行发布级 QA,让运行时驱动一个虚构创业项目(playbook),观察者不告知被测智能体正在被评估,审计者强制要求真实交付物(可编译/解析/运行的产物)与真实协作(同伴消息、评审循环、分歧解决)。该技能拒绝任何把工作描述为 QA 的提示词。

主要能力:按 playbook 目录选择场景(如 northstar-pay、devtool-oss-launch、consumer-saas-growth),未指定时从上次运行的 PLAYBOOK_REF 轮换;用 eng-qa-bootstrap 搭建实验室并保持存活;用 qa-report 与 qa-execution 规划并执行会话;通过 CLI、API、Web、运行时多面采集证据;用严格审计脚本检查禁止短语、交付物数量、协作循环与停滞。

使用方式:先读 references/playbook-catalog.md 选定 playbook;激活 eng-qa-bootstrap 并消费 BOOTSTRAP_MANIFEST;准备并发布操作员启动消息,例如 python3 .agents/skills/eng/eng-real-scenario-qa/scripts/post-operator-kickoff.py 与 activate-playbook-tasks.py;运行只读观察器 observe-runtime.py;最后运行 audit-qa-evidence.py --strict,并按 TEARDOWN_COMMAND 拆除实验室。

适用场景:发布前验收、运行时缺陷诊断与修复后复验。

限制:启动后不得再向被测智能体发提示;停滞视为 bug;provider 不可达时判定为 BLOCKED 而非 PASS;审计退出码 2 为阻塞失败;拆除必须报告 clean: true。具体价格、平台支持等资料暂未提供。