SuperAPI AI 工具集

run-eval-loop

营销与增长

查看项目

更新于 10-16 05:47

技能介绍

用途:run-eval-loop 是面向可衡量计划的编排型元流程技能,把一个可衡量的举措转成领域范围内的循环工作区,将策略、执行、每轮评估快照、评分结果行和沉淀的学习集中在一个文件夹中。它负责循环搭建、账本与 schema,并把每轮评估与评分路由给匹配的 evaluate-* 兄弟技能。核心问题是:未来智能体能否只读一个循环文件夹就改进该可衡量面,而不必从零散技能输出中重建历史。

主要能力:搭建 .forsvn/loops/[slug]/ 目录,包含 program.md(lifecycle: loop)、context.md(lifecycle: loop-context)、strategy/、execution/、evals/、results.tsv(8 列账本,通过 append-loop-result.ts 追加)和 learnings.md(lifecycle: learning,仅追加)。

关键门槛:必须有可命名且可衡量的面(页面、活动、帖子系列、广告组、邮件序列或外联动作),否则返回 NEEDS_CONTEXT 并建议 discover;必须至少有一个主指标及其来源(基线可未知);不得创建以技能名命名的文件夹;执行边界限于营销/内容资产,不部署代码、不发布到平台、不构建应用 UI、不修改外部系统;发布与线上变更需人工批准。

使用方式:先检查 .forsvn/loops/ 是否有既有循环、.forsvn/experience/ 是否已有问答、manifest 是否最新(过期则运行 bun scripts/manifest-sync.ts)。随后按预派发流程收集表面、指标来源、领域、可变/冻结面、基线窗口等信息,再按 9 步派发序列执行:搭建→读状态→Layer 1 并行→Layer 2 顺序→FAIL 时修订一次→写入→质量反馈→manifest-sync→返回。--fast 模式将 Layer 1 折叠为单智能体并在干净 PASS 时跳过 Critic 修订,但不跳过 5 个关键门槛与冷启动。

适用场景:需要持续衡量并迭代的营销、内容或增长类举措。

限制:不适用于无可衡量面的请求;不负责代码部署与平台发布;results.tsv 的 schema 变更需同步更新 _shared/eval-loop-spec.md。每次回复需以 DONE、DONE_WITH_CONCERNS、NEEDS_CONTEXT 或 BLOCKED 之一结尾,并附质量反馈状态。