SuperAPI AI 工具集

launch-run

测试与质量

查看项目

更新于 10-15 20:28

技能介绍

用途:在资源(智能体、人设、用例、指标)已确定的前提下,启动一次具体的 Coval 评估运行,并明确执行边界。若需规划、受限执行与结果审计,应使用 quick-eval;从该工作流调用时不得绕过其会话预算。

主要能力与用法:先确认目标组织、工作区与 API 环境,读取智能体、人设、确切用例及所选指标定义,并检查命令帮助与错误。认证不等于租户身份确认。准备结构化启动请求,显式给出 options.test_case_ids、迭代次数、并发数、指标 ID 及经验证的每次调用时长上限。按人设计算 用例数 × 迭代数 × (1 + 变异数),并计入会话中此前的运行;并发不降低总成本。展示具体计划与有界停止条件。规划或查看请求不等于付费运行授权;已授予的执行权限应沿用,仅在需扩大范围或预算时询问。对未测试连接默认只提议一次调用,而非整套测试。

执行命令:coval --agent runs launch --input-json @run.json。检查 ok 与退出状态,保存返回的 run ID。若响应不明确,先检查匹配的运行再重试,切勿盲目重试启动。

返回与限制:返回 run ID 与实际观察到的状态,Queued 不等于 completed。按用户请求范围处理:完整评估则轮询并审计结果(同 quick-eval);仅启动则交回运行,不宣称质量。使用当前 runs schema,不要使用 /eval/*、不要臆造命令标志、不要添加调度、不要更改智能体默认值、不要无人值守重跑。本地计划不是服务端强制的支出上限。