A/B 测试结果分析器

关于此工具

我如何使用这个工具？

通过双边测试和置信区间比较两个转化率。

使用结果前需要注意什么？

采用固定 5% 显著性水平的双样本比例正态 z 检验，p 值使用合并比例，差异的 95% 置信区间使用非合并标准误。成功或失败次数过少时提示样本不足。假设随机独立分组、每位访客最多一次转化，且事先确定停止时间；不校正反复查看结果或多重比较的影响。

计算或使用示例

1000 名访客的 50 次转化为 5%； 1000 中的 80 是 8%。差异为3个百分点；两侧 p 值约为 0.0065。

相关工具