SuperAPI AI 工具集

empirical-prompt-tuning

智能体与模型

查看项目

更新于 10-15 21:10

技能介绍

用途:迭代改进面向智能体的指令,例如技能、斜杠命令、CLAUDE.md 与代码生成提示词。适用于刚创建或大幅修订技能/任务提示词后、智能体行为不符预期且需归因于指令歧义时、以及加固高频使用或自动化核心的提示词时;不适用于一次性提示词,或目标仅是体现作者主观偏好。

主要能力与流程:迭代 0 先做描述与正文一致性静态检查,避免子代理按描述“重新解释”正文造成假阳性;随后固定目标提示词,准备 2 至 3 个评估场景(一个中位、一至两个边缘)与提前固定的需求清单(每场景 3 至 7 项,准确率=满足项/总项)。通过 Task 工具派发空白起点子代理读取指令并执行场景,禁止用自读替代。再做双侧评估:提取执行器自述中的不清晰点、酌情补全项与重试数,按理解/规划/执行/格式化四阶段标注来源,并把每个不清晰点整理为 Issue/Cause/General Fix Rule。指令侧指标包括成功失败、准确率、步数(用 tool_uses)、时长(duration_ms)与重试次数;需求清单至少含一个 [critical] 项,且事后不得增删标签。应用最小修复,每轮一个主题,修复前须说明满足哪条判定措辞;若属事实缺失/错误,先对一手来源核验,再判定缺陷归属平台还是自身指令。收敛粗略规则为连续两轮无新不清晰点且指标改善低于阈值,关键提示词可要求连续三轮。

限制:无法派发子代理的环境不适用;执行器报告不能当作一手来源,多个执行器可能共享同一误读。平台侧缺陷应仅上报,不写入绕过方案;临时性说明需用可 grep 标记并单列维护者清单,与稳定规格内容分开管理。