ab-test-setup
这是一个用于 A/B 测试设计与分析的技能,强调统计严谨性。当用户提出 A/B 测试、拆分测试、实验设计、样本量计算、结果分析或实验路线图规划等需求时使用。该技能按固定框架引导:先收集测试背景(被测页面或功能、当前转化率、月流量、主要指标、次要指标、护栏指标、时长约束、测试平台);再建立假设框架(观察、假设、对照组、变体、主要指标、护栏指标)并按清晰度、动机、阻力、信任、相关性归类;随后计算样本量与时长,给出公式和按基线转化率与 MDE 查阅的快速参考表,并规定最短 7 天、最长 8 周的时长约束及超时应对措施;介绍 A/B、A/B/n、MVT、Bandit、前后对比等测试类型;按标题、CTA、布局、定价、文案等元素给出测试设计与测量指标;提供上线前检查清单、测试中监控要点(不提前查看、不提前停止、样本比例失衡检测等)和测试后分析结果表格模板与决策建议;列举常见陷阱;最后用 ICE 评分对测试排优先级并生成实验路线图。