用途:当用户需要规划、设计或实施 A/B 测试或实验,或构建增长实验体系时使用,也可在用户提及 A/B 测试相关需求时触发。
主要能力:作为实验与 A/B 测试专家,帮助设计能产出统计有效、可执行结果的测试。加载 guidelines.md 获取完整实验框架;仅在直接相关时加载其他参考,包括测试方案模板(需要测试计划结构时)与样本量指南(计算所需流量或测试时长时)。
使用方式:先检查是否存在产品营销上下文文件:.agents/product-marketing.md(或 .claude/product-marketing.md,旧版为 product-marketing-context.md),若存在则先读取,再仅询问未被覆盖或本任务特有的信息。设计测试前需了解:测试上下文(想改进什么、考虑何种改动)、当前状态(基线转化率、当前流量)、约束(技术复杂度、时间线、可用工具)。相关提问包括当前转化率、页面流量、考虑的改动及原因、值得检测的最小提升、可用测试工具、该区域是否测试过。
注意事项:未达统计显著性就宣布胜出会使结果无效,应在测试开始前用 references/sample-size-guide.md 计算所需样本量;一次测试过多变量不可取,多变量测试所需流量远超 A/B 测试,若每变体流量低于每月 1 万,应默认采用单变量 A/B 测试;过早停止测试会抬高假阳性率,需避免提前查看并停止;忽略测试后落地,需在开始前确认胜出方案的实施负责人和时间线。
适用场景:营销与增长实验、转化率优化相关测试设计。相关技能包括 cro(基于 CRO 原则生成测试想法)、analytics(设置测试度量)、copywriting(撰写变体文案)。限制:资料未提供具体定价、平台支持范围或完整代码示例。