用途:Skill Creator 是一个用于创建新技能、迭代改进现有技能并评估技能表现的技能。用户想从零创建技能、更新或优化技能时可用它。
主要能力:帮助明确技能意图与触发条件,撰写 SKILL.md 草稿,生成测试用例,运行带技能与基线的对比评估,从定性和定量角度评估结果,并据反馈重写技能;完成后还可运行技能描述改进脚本以优化触发。
使用方式:先确定用户所处阶段再介入。流程包括捕获意图(技能做什么、何时触发、输出格式、是否需要测试用例)、访谈与研究、编写 SKILL.md、创建 2-3 个真实测试提示并存入 evals/evals.json、在同轮启动带技能与基线运行、运行期间草拟断言、记录耗时与 token、评分聚合并启动查看器、读取 feedback.json、据反馈改进并重复,最后扩大测试集。必要命令示例:python -m scripts.aggregate_benchmark <workspace>/iteration-N --skill-name <name>;启动查看器使用 eval-viewer/generate_review.py,并提供 --static 等参数。技能结构含 SKILL.md(YAML frontmatter 的 name、description 必需)及可选 scripts/、references/、assets/。
适用场景:从零创建技能、改进已有草稿、优化技能触发描述、需要量化基准与可视化评审的迭代流程。
限制:技能不得包含恶意软件、漏洞利用代码或危害系统安全的内容;主观输出技能(写作风格、艺术)通常不需要断言;具体收费、价格与平台信息暂未提供。