SuperAPI AI 工具集

validator-expert

部署与运维

查看项目

更新于 10-15 23:30

技能介绍

用途:Validator Expert 是一个技能,用于验证 Vertex AI Agent Engine 部署的生产就绪度。它执行加权检查,覆盖安全(30 分)、监控(20 分)、性能(25 分)、合规(15 分)和最佳实践(10 分),产出 0-100% 综合评分、每项检查的通过/失败结果,以及按优先级排序的整改建议。

主要能力:安全方面检查 Agent Identity 是否启用、服务账号是否遵循最小权限、VPC Service Controls 边界、静态与传输加密、硬编码密钥、Model Armor 及 Memory Bank IAM 条件;监控方面检查 Cloud Monitoring 仪表盘、告警策略、token 用量跟踪、结构化日志与延迟 SLO;性能方面检查自动扩缩容、资源限制、缓存策略、Code Execution Sandbox TTL 与 Memory Bank 保留策略;合规方面检查审计日志、数据驻留、隐私与保留计划、备份与灾难恢复。

使用方式:需先认证 gcloud CLI,并具备 roles/aiplatform.viewer、roles/iam.securityReviewer、roles/monitoring.viewer 权限,且目标项目启用 Cloud Monitoring API 与 Cloud Logging API。通过 Python SDK(vertexai.Client().agent_engines.get(name))或 REST API(GET https://{LOCATION}-aiplatform.googleapis.com/v1/projects/{PROJECT}/locations/{LOCATION}/reasoningEngines/{ID})获取部署配置,再依次运行各验证套件,计算加权得分并生成整改清单。

适用场景:上线前验证、事件后安全审计、季度合规审查(如 SOC 2 准备)。

限制:需要相应 IAM 与组织级权限;监控 API 无数据时需启用 API 或生成合成流量;VPC-SC 读取可能受组织策略限制;合规检查在审计日志未启用或保留期过短时可能无法得出结论。评分状态:READY ≥85%,NEEDS WORK 70-84%,NOT READY <70%。