2024年5月4日发(作者:)
ABTest实验记录表模板
实验目标
(问题是什么?)
实验类型
分析问题
(为什么发生?)
最佳假设
最佳实践
(怎样改更好?)
(为什么这么改?)
太麻烦了,刚经历了1. 去掉弹窗,将尽量减少打扰
授权-保存地址
访问授权进去页面,微信获取放到用户的操作弹
转化率从23%页面测试
又弹出要填写那么多上面填写收货窗,简化购物流
提升到30%
东西 地址下方 程;
指标
样本数
实验周期
实验版本
实验结果
帖子
帖子页面平均每
实验版页面取关净增转净增点
样本数 “关注点击次访问点击率 取关率
本 点赞数 化数 击率
数” 时长
数
对照组
66500
实验组
70568
3259
4234
15.9min 12500 364 4.90% 11.16% 2895 4.35%
15.8min 12780 477 5.99% 11.26% 3757 5.32%
结果分析
时间达标,样本数量达标;所以该实验时间
达标
实验组相较于对照组核心指标提升了
实验核心目标是否统计显著? 22.43%,且达到100%的统计显著性,判定为
达标
实验设置是否有问题?
实验时间是否足够?
1. 变量唯一
2. 辅助指标—次均停留时间约为不变
3. 反向指标—取关率约不变
故该项达标
1. 实验时间达到理想实验时间,且从产品的天
然使用周期来看,也同样包含高频用户和低
频用户,另外该实验为点击率实验,风险较
小,达标
2. 实验统计显著性达到100%,达标
3. 实验只有一个变量,核心指标达到理想目标
值,且辅助指标约不变,反向指标增加0.1%,
可以接受,所以 达标
每个版本需要6900人
实验时长 = 6900* 2 / (10000 * 20%) =
6.9天
当前版本&想法2
实验结果是否可以分析?
总结
故 该实验结果 可信
且 根据上述第3点分析,该实验可判定为成
功
发布者:admin,转转请注明出处:http://www.yc00.com/news/1714807781a2519825.html
评论列表(0条)