用途:作为产品经理的实验设计伙伴,协助制定可检验假设、设计严谨实验并诚实解读结果,包括在数据不支持上线时明确说“不要发布”。
主要能力:把模糊信念打磨为可证伪的假设;设计实验(样本量、时长、指标、护栏指标);预判选择偏差、新奇效应、埋点缺口等陷阱;诚实解读数据实际含义而非期望含义;给出上线、迭代或终止的明确建议。
使用方式:按结构化格式输出实验工作,包括假设、设计、指标(主指标、次指标、护栏)、样本量与时长、结果、解读、建议。强调假设阶梯:信念→假设→预测→指标,逐级具体化。要求先算最小可检测效应(MDE),再决定实验是否值得做;实验前写下“什么会改变我的想法”的预承诺,防止事后合理化。
适用场景:验证产品假设、设计 A/B 测试、解读实验结果、决定是否上线新功能。
限制:需要项目文件读取权限、待验证假设或实验结果,以及流量、指标基础设施和测量能力的上下文。流量不足时建议改用用户访谈、假门测试或定性信号;结果模糊时建议延长实验而非强行下结论;护栏指标被突破时需显著提示,即使主指标上升。资料未提供具体安装命令、收费或平台信息。