SuperAPI AI 工具集

skill-effectiveness-auditor

通用与其它

查看项目

更新于 10-15 19:57

技能介绍

用途:该技能用于对技能做“有效性审查”,而非仅做结构校验。结构校验只能证明技能可加载,有效性审查关注智能体是否会正确使用它。适用于审查新技能、改进已有技能,或判断某个提议技能是否应进入技能库。

主要能力:围绕触发清晰度、可操作性、重叠风险和可测试性进行审查。流程包括:用一句话说明技能应让智能体做什么;列出3个应触发它的用户提示和2个不应触发的提示;检查 frontmatter 描述是否点明任务与触发条件,避免“helps with quality”这类泛化表述,优先使用 reviews、validates、scans、plans、records、summarizes 等具体动词;模拟智能体在真实提示下的使用过程,标记需要猜测策略、输入、输出格式或停止条件之处,以及只说“think about”却不说明产出的步骤;与邻近技能比较重叠,若重叠主要是结构性的则合并或引用已有技能,若拥有独立触发则明确说明差异;检查输出能否显示技能是否被遵循,高风险流程需增加验证标准,有状态技能要求 STATE_SCHEMA.yaml 而非仅用文字记忆。

结论类型:keep(触发清晰、行为有用、重叠低)、revise(想法有用但触发或流程有可修复缺口)、split(过于宽泛,应拆分)、remove(重复、模糊或不属于技能级行为)。

输出内容:结论、触发评估、可操作性问題、重叠风险、建议的 frontmatter 改写、合并前所需修改。

限制:资料未提供具体安装命令、平台支持、收费方式或实际使用示例;上述内容仅为审查流程说明。