SuperAPI AI 工具集

eval-suite

测试与质量

查看项目

更新于 10-15 22:37

技能介绍

用途:这是一个批量内容质量评估命令(/digital-marketing-pro:eval-suite),一次性处理整个内容库、某次活动的全部素材或一组交付物,给出组合层面的整体质量评估,而不是逐条评估。输出包含内容排名、逐维度分析、整体质量分布、集合内共性问题以及按优先级排列的修改清单。适合活动上线前排查弱素材、内容审计时评估库健康状况,或生产冲刺后统一质检。每次评估都会记录到质量追踪器,用于纵向趋势分析。

主要能力:读取品牌上下文(品牌声音、目标市场合规规则、行业背景、指南与模板、机构 SOP),将用户提供的内容来源解析为扁平条目列表(支持文件路径列表、目录路径、带标签的内联内容块),逐条评估并汇总组合统计:平均综合得分、等级分布(90+ 优秀、80-89 强、70-79 良好、60-69 待改进、<60 自动拒绝)、逐维度组合平均值、标准差(衡量一致性),随后排名所有内容、找出共性问题(如某维度普遍偏低)、生成按影响力排序的修改清单(优先低于自动拒绝阈值、高曝光类型且低于平均分、或单一维度拖垮整体综合分的条目),并支持与历史 run ID 基线对比,给出每项改进或退步。

使用方式:脚本位于该插件的 scripts/ 文件夹(与 skills/ 同级);若宿主未设置 ${CLAUDE_PLUGIN_ROOT},可从插件 scripts/ 目录运行。需 Python 3.10 或更高版本,使用 python,或在找不到 python 的系统(macOS、许多 Linux)上使用 python3。用户需提供内容来源(文件路径列表、目录路径或带标签的内联内容);内容类型、证据文件、评估深度(quick 默认,full 更全面,超过 10 项建议 quick)、自动拒绝阈值(默认 60)和对比基线均为可选。目录会扫描 .txt、.md、.html、.csv 行等文本类文件;超过 25 项会先确认。

限制:资料未说明评分所用模型、准确率或与其他工具的效果对比;批量规模上限、处理耗时、收费与价格信息暂未提供。