用途:围绕 AE 平台的 A/B 实验,从配置与报告证据出发做诊断,并给出可辩护的决策。适合用户询问实验结论、效果解释或是否上线时使用。所有平台交互统一走 ae-cli,并遵循 references/platform-operations.md;诊断读 references/diagnostic-playbook.md,上线决策前读 references/decision-framework.md。
主要能力:按步骤恢复实验上下文(假设、预期决策、对照组与处理组、分配单元、流量与分组、指标定义、MDE/alpha/power、起止时间与配置变更);检查运行完整性;按因果顺序执行数据诊断;解释效应并区分统计显著与实际价值等情形;分析趋势与分群;基于证据诊断原因;依据决策框架输出单一决策。可用 scripts/analyze_experiment.py 做 SRM 与组间比较,不手工计算 p 值或置信区间。
使用方式:先解析准确项目与实验,再依次做完整性检查、数据诊断、效应解读、趋势与分群、原因诊断和决策。缺少原始假设或成功标准时,只解释观察到的效应,不追认成功标准。p>alpha 不能表述为“无效果”,应说明当前数据未证实效应并给出区间。
限制:不会自行启动、暂停、结束、改流量、删除或上线实验,除非用户另行提出该平台操作。项目或实验不明确时需列举候选并询问,不猜测。权限失败时停止相关查询并报告缺失权限。报告为空说明无匹配数据,不误判为传输失败。若缺少报告能力,需保留 ae-cli 缺口并请求包含所需字段的平台导出。不输出无解释的原始表格。