§ 04Experiment
实验设计
样本量 · SRM · 显著性 · 归因模型
样本量计算器
两比例检验 · 等分配 · 双侧
对照组当前转化率
%
希望检出的最小相对提升
% 相对
第一类错误概率,常用 0.05
真有效应时检出概率,常用 0.8
每组样本量
8,155
总样本量
16,310
日均流量 86,000 → 预计需 1 天
SRM 自检
样本比例不匹配检验 · 卡方
%
卡方统计量 χ²
4.082
p 值
0.0434
正常样本比例与预期一致,可继续读数
显著性 · 双门槛
统计显著(p < 0.05)+ 业务显著(相对提升 ≥ 2%)
对照组
转化数: 120
实验组
转化数: 150
对照组转化率
2.40%
实验组转化率
3.00%
相对提升
+25.00%
p 值(双侧)
0.0642
提升达标但 p 值未过
跨天归因模型
选择归因模型,查看 5 个触点对最终转化的权重分配
Push 消息0%
自然搜索0%
广告投放0%
老客转介绍0%
自然访问100%
末次触点模型把全部转化归功于最后一次点击,简单但对中上漏斗触点不公平。