SuperAPI AI 工具集

judge

智能体与模型

查看项目

更新于 10-16 06:50

技能介绍

用途:对当前对话中已完成的工作(代码改动、分析、文档、配置等)进行结构化评估。流程分为四阶段:先从对话中提取评估上下文(原始任务、实际产出、涉及文件、约束与验收标准、产物类型),仅将提取后的上下文传给子代理以避免上下文污染;随后调度 meta-judge 子代理,依据产物类型和评估重点生成评估规范 YAML(含评分表、检查清单与评分标准);再将该规范原样传给 judge 子代理,由其在独立上下文中按规范评估并要求先给证据后给分;最后校验评分范围、加权总分计算与自验证,并向用户展示完整报告。

主要能力:meta-judge 生成定制化评估标准;judge 基于证据打分(引用文件路径、行号、引文);评分区间 1-5,对应 EXCELLENT、GOOD、ACCEPTABLE、NEEDS IMPROVEMENT、INSUFFICIENT 等结论;明确要求规避长度偏差、冗长偏差与权威偏差,且不向 judge 透露分数阈值。

用法要点:调度 meta-judge 使用 Task 工具,model: opus,subagent_type: "sadd:meta-judge";调度 judge 使用 subagent_type: "sadd:judge",并传递 CLAUDE_PLUGIN_ROOT 与 meta-judge 返回的完整 YAML,不得跳过、增删或概括;参数可用于限定评估重点,不明确时需询问用户评估对象。

限制:该命令为 report-only,只评估不改动工作;使用单一 judge 保证上下文隔离;低置信度评估建议人工复核;命令要求与 agent 指令的完整细节未在资料中全部给出,未提供的部分暂未提供。