SuperAPI AI 工具集

panel-review-loop

测试与质量

查看项目

更新于 10-16 05:39

技能介绍

Panel review loop 是一个面向 Fallow 项目的迭代评审技能,目标是在具有代表性的真实世界项目上反复评审并改进 Fallow 的某个面向用户界面,直到评审面板不再有阻塞性意见。

用途 该技能用于对 Fallow 的用户可见界面进行系统性、证据驱动的改进。它不依赖主观预期,而是通过真实项目语料库的实际输出来驱动评审,确保改进方向与真实使用场景一致。

主要能力

  • 定义用户可见界面和成功标准。
  • 从 benchmarks/fixtures/real-world/ 中选择具有代表性的项目。
  • 捕获每个项目的实际输出。
  • 基于证据运行 panel-review,而非基于预期答案。
  • 实施针对共识的最小且连贯的改进。
  • 重新运行同一语料库并比较行为。
  • 当面板没有阻塞性意见且进一步修改不再显著改善界面时停止。

使用方式

  1. 真实世界语料库有意不纳入版本控制。首次使用前,请遵循基准设置并运行:npm --prefix benchmarks run download-fixtures
  2. 定义用户可见界面和成功标准。
  3. 从 benchmarks/fixtures/real-world/ 中选择代表性项目。
  4. 捕获每个项目的实际输出。
  5. 基于证据运行 panel-review,而不是基于预期答案。
  6. 实施解决共识的最小且连贯的改进。
  7. 重新运行同一语料库并比较行为。
  8. 当面板没有阻塞且进一步修改不再实质性改善界面时停止。

适用场景 适用于需要基于真实项目输出对 Fallow 用户界面进行迭代评审和改进的开发流程,尤其适合需要多轮验证、以证据驱动决策的场景。

限制

  • 真实世界语料库不纳入版本控制,首次使用前必须下载固定装置。
  • 迭代过程中需保持语料库稳定。
  • 除非计划明确批准版本化变更,否则应保留输出契约。
  • 关于该技能的具体收费、价格、平台支持范围等信息暂未提供。