SuperAPI AI 工具集

prompt-set-qa

智能体与模型

查看项目

更新于 10-15 21:38

技能介绍

用途:对提示词集合(prompt universe)做质量门禁,判定通过、修订、隔离或拒绝,不擅自修复上游工作。

主要能力:先运行确定性检查,包括 schema 与来源完整性、唯一 ID 与引用解析、目标/产品/域名/人物/口号/专有类别/活动/溢美声明/竞品词、禁止的答案派生字段、Unicode 规范化、语言、长度、单概念形态、精确哈希、词法相似候选对、固定模型下的嵌入对,以及架构覆盖、预算与 aided/lane 一致性。再做语义复核:证据到提示词的蕴含、自然度与角色/地区真实性、两个变体是否保持同一规范意图、邻近度/旅程/行为/预期答案/aided 状态一致性、商业引导或推荐强迫、语义口号或溢美泄漏、答案派生语言是否进入核心、相似提示是否改变实质约束。

决策规则:pass 为有支撑、自然、分类正确、无污染且不冗余;revise 为措辞可改而不动上游事实或单元含义,转 realistic-prompt-generation;quarantine 为可能有用但等级 D、答案派生、语义可疑、地区未审或待证据/人工决定;reject 为污染、无支撑、实质引导、错误单元、权限失败或不可修复重复。

使用方式:输入需 prompt_universe.json、prompt_architecture.json、证据摘录与来源元数据、版本化污染登记表、确定性规范化/词法扫描/精确哈希/相似对结果,可选盲审人工决定。拒绝包含基线可见性、当前排名、目标表现、答案派生目标页或选择器偏好结果的输入。输出先给 Markdown QA 报告,再写 prompt_qa.json,包含 schema_version、artifact_id、created_at、created_by、source_manifest_hash、warnings、baseline_fields_blinded、decisions、accepted_candidate_ids、counts、gate_status。每个候选必须恰好一个决策,accepted 等于 pass,计数需与总数对账,否则输出无效。

适用场景:提示词集合上线前的质量门禁、污染与重复审查、健康/法律/金融/安全等高风险领域的边界控制。

限制:不得编造来源、岗位、ICP、流行度或权重;不得改架构救提示;不得把问题改写成产品推荐;不得按目标表现选择;争议核心/地区/高权重决策须交人工。嵌入相似只能提名,不能自动删除。高风险领域若要求模型诊断、判定个人适用性、开处方或作专业判断,除非明确在范围内并有合格复核,否则隔离。