SuperAPI AI 工具集

iblai-marketing-ab-test-setup

测试与质量

查看项目

更新于 10-15 22:16

技能介绍

用途:规划、设计并运行 A/B 测试或实验,既可针对单个实验做范围界定,也可建立持续的增长实验项目。

主要能力:提供假设框架(因为[观察/数据],我们相信[改动]会导致[预期结果],面向[受众],当[指标]满足时即验证);区分 A/B、A/B/n、MVT、Split URL 等测试类型及所需流量;给出样本量速查表(如基线 1%、提升 10% 需约 150k/变体);定义主指标、次指标与护栏指标;指导变体设计(文案、视觉、CTA、内容)与流量分配(50/50、90/10、渐进式);覆盖客户端与服务端实现方式;提供上线前清单、结果分析与文档模板;并给出增长实验循环、ICE 优先级评分、实验速度指标与节奏建议。

使用方式:先读取 .agents/product-marketing-context.md(旧版为 .claude/product-marketing-context.md),只询问其中缺失的信息;设计前需明确测试背景、基线与约束。

适用场景:单次实验设计、定价页等页面测试、持续增长实验项目、实验复盘与 playbook 沉淀。

限制:需预先承诺样本量,不得中途偷看结果提前停止;一次只测一个变量;结果需达到统计显著(95% 置信度、p<0.05)才可判定;具体工具、时间线与技术复杂度等未在资料中提供。