SuperAPI AI 工具集

19-ab-test-setup-global

测试与质量

查看项目

更新于 10-16 01:16

技能介绍

用途:帮助团队设计并执行能产生决策依据的 A/B 测试,避免样本不足、提前偷看和假设模糊导致的无效实验。

主要能力:提供七项有效测试原则(只改一个变量、带数字的假设、足够样本量、足够时长、不中途偷看、p<0.05 显著性、完整记录);给出样本量估算公式:每变体样本 ≈ 16 × p × (1 − p) / MDE²,并附落地页与邮件主题行的计算示例;提供可行性速查表、多臂与多变量测试说明、测试优先级清单(标题、CTA、主视觉、定价展示、社会证明、表单字段、邮件主题、广告创意)、工具推荐、无专用工具时的搭建步骤、结果分析与决策矩阵、常见陷阱及输出模板与质量清单。

使用方式:先读取 .agents/product-marketing-context.md(若存在),再收集最多 4 个问题(测试对象、主指标、日流量、测试目标),据此计算样本量与时长,定义结束日期并遵守,结束后用计算器检验显著性并记录结果。

适用场景:落地页转化率、广告文案与创意、邮件主题行、定价展示、CTA 等营销实验。

限制:资料未提供具体收费价格以外的实施保证;日流量低于 100 时建议先做流量增长;Google Optimize 已于 2023 年 9 月停用,需迁移至其他平台。