SuperAPI AI 工具集

agentic-kpi-tracking

智能体与模型

查看项目

更新于 10-16 00:23

技能介绍

用途:指导度量与跟踪智能体编程(agentic coding)KPI,用于评估 ZTE 就绪度,适用于衡量工作流有效性、跟踪向 ZTE 的进展、分析成功模式以及识别改进领域。

主要能力:汇总指标包括 Current Streak(连续成功,Attempts<=2)、Longest Streak、Average Presence(平均尝试次数,目标 1)、Total Plan Size、Total Diff Size。每次运行指标包括 Attempts、Plan Size、Diff Size、Files Changed。

计算方式:Attempts 仅统计完整重规划类工作流(adw_plan_iso、adw_patch_iso),构建/测试/评审不计入增量。Streak 从最近一次运行倒序累计 Attempts<=2 的连续次数。Diff 统计使用命令 git diff origin/main --shortstat。

使用方式:从状态或 git 收集 ADW ID、Issue 编号、分类、计划文件路径与全部工作流,计算指标,更新明细表并重算汇总,再做趋势分析。KPI 存于 app_docs/agentic_kpis.md 或等效文件,包含 Summary 与 Detail 表格。

ZTE 就绪指标:Current Streak>=5 可尝试 ZTE;Average Presence<=1.5 表示效率良好;最近 10 次零失败表示高置信;Plan Size 递增表示在扩展。

限制:资料未提供自动化脚本细节、价格及平台支持信息,需手动或按现有工作流执行;应避免只做简单任务刷指标、忽略失败重试及不一致跟踪等反模式。版本 v1.0.0(2025-12-26)。