SuperAPI AI 工具集

eval-config

通用与其它

查看项目

更新于 10-15 22:37

技能介绍

用途:为某个品牌配置内容评估系统,包括各维度最低质量阈值、评分权重、自动拒绝分数,以及按内容类型设置不同的质量标准。资料举例说明:医疗健康品牌可能更看重幻觉风险与声明核实,消费品牌可能更看重品牌语气与可读性;代理机构可为不同品牌分别设置。

主要能力:查看当前配置(get-config);设置阈值(set-threshold),维度包括 content_quality、brand_voice、hallucination_risk、claim_verification、output_structure、readability、composite,分数范围 0-100;设置权重(set-weights),权重为维度到权重的 JSON 对象,总和约 1.0(允许 ±0.02);设置自动拒绝分数(set-auto-reject),通常 40-60;按内容类型覆盖阈值或权重(通过 --content-type 附加到 set-threshold / set-weights,没有独立 action);recommend 仅做分析;reset 恢复默认。

使用方式:脚本位于插件 scripts/ 目录,需用 Python 3.10 或更新版本运行,必要时用 python3。命令示例:python "${CLAUDE_PLUGIN_ROOT}/scripts/eval-config-manager.py" --brand {slug} --action get-config;set-threshold 示例:python "${CLAUDE_PLUGIN_ROOT}/scripts/eval-config-manager.py" --brand {slug} --action set-threshold --dimension {dimension} --threshold {value};可加 --content-type {type}。设置权重使用 --weights '{weights_json}'。

配置流程:读取品牌上下文与准则,展示当前设置,执行变更前验证(权重总和、阈值范围、自动拒绝低于维度阈值均值、类型覆盖不产生不可能场景),显示前后对比与历史影响,并给出相关调整建议。

限制:无品牌时会询问是否先执行 brand-setup,或按默认继续。资料未提供价格、收费、平台支持范围、具体效果数据或额外安装方式。