SuperAPI AI 工具集

agentic-responsible-ai-assessment

智能体与模型

查看项目

更新于 10-15 19:58

技能介绍

用途:引导客户完成面向智能体系统的负责任AI(RAI)评估,覆盖治理、安全与公平等维度,并输出可视化态势评分。

主要能力:按三阶段(治理基础→试点部署→评估与加固)逐题提问,共20题;每题按0-5成熟度评分(0未处理、1已认知未实施、2依赖人工、3标准化、4自动化强制、5量化度量并持续改进);跟踪并展示八个固定维度:治理、隐私与安全、安全、真实性与稳健性、可控性、公平性、可解释性、透明度。某维度由多题评分时取平均并四舍五入,未答题维度标记为“未评估”,与0分区分。每题评分后渲染态势柱状图,并给出基于问卷实现示例的改进建议。

使用方式:在智能体客户端安装该技能后,用“run a Responsible AI assessment”或“RAI scorecard”等短语触发。技能先读取references/questionnaire.md(问题、示例答案、实现示例与评分标准),检测客户端渲染模式,再逐题提问并绘图。渲染模式自适应:Amazon Quick用Highcharts HTML artifact(从/vendor/highcharts/加载,不用CDN);其他桌面/IDE客户端(Kiro桌面、Claude Desktop、VS Code中的Copilot Chat)用Mermaid xychart-beta;终端/CI客户端用ASCII柱状图,并始终保留ASCII作为回退。

适用场景:智能体平台的治理、安全与公平态势评估,RAI成熟度评审,以及需要按维度可视化评分进展的咨询式评估。

限制:评估不全面,满分也不代表符合任何法律义务;负责任AI实践因行业而异,需参考行业指南与Responsible AI Well-Architected Lens。开始前须逐字展示免责声明。只能使用问卷文件中的问题,不得编造;一次只问一题,不跳阶段。若答案含糊,先追问再评分。自定义评估可编辑references/questionnaire.md或指向自有问卷,但须保持阶段/支柱结构与0-5评分标准。具体安装命令与价格暂未提供。