ab测试显著性检验
创始人
2024-05-15 00:26:03
0次
AB测试是一种常见的在线实验方法，用于比较两个或多个相似的版本，以确定哪一个更优。在一个AB测试中，我们将访问者随机分组，将一组暴露于A版本，另一组暴露于B版本，然后收集数据，以确定哪个版本更优。
显著性检验是一种统计方法，用于确定两个或多个样本之间是否存在显著差异。在AB测试中，显著性检验可用于确定两个版本之间的差异是否真正显著，或者是否可能是由于随机性造成的。
常见的显著性检验包括t检验和Z检验。在AB测试中，通常使用t检验，因为样本数量比较小。 t检验用于确定两个样本之间的平均值是否有显著性差异。我们基于前端A/B 分享组件在最近7天的数据进行测试，如图：
我们要测试的是，点击按钮后转化率是否有显著提升。样本A是上线前的对照组，样本B是上线后使用的分享组。样本B的转化率比样本A高4.3%，我们可以这样设置零假设H0和备择假设H1。
- H0：样本A和样本B的平均值相等
- H1：样本A和样本B的平均值不相等
使用Python库statsmodels进行t检验。statsmodels是用于估计统计模型的Python模块，用于进行经济学、金融学和社会科学的统计分析。
示例代码如下：
import numpy as np
from statsmodels.stats.weightstats import ttest_ind
a = [114, 128, 135, 116, 131, 127, 141]
b = [126, 137, 157, 142, 154, 146, 161]
t, p, dof = ttest_ind(a, b)
print('t值:', t)
print('p值:', p)
输出结果如下：
t值: -2.012751023101255
p值: 0.06528779702107133
p值大
相关内容
热门资讯
玻璃硬盘原理图 玻璃硬盘原理
玻璃硬盘，又称为磁头悬浮硬盘（Magnetic Head Flying Disk，MHFD），是一种...
QQ音乐提示代理模式可能无法正...
QQ音乐提示代理模式可能无法正常访问，如上图所示，是怎么回事呢？ 这个可能和你的网络设置有关系，首先...
别人打电话听不见我说话怎么回事...
当我们在使用手机时，可能会遇到别人打电话过来听不见声音的情况，这种情况可能是由多种原因导致的，下面我...
家里监控最长能保存多少天的记录...
家里监控一般保存多久 随着科技的发展，家庭监控系统已经成为了许多家庭的必备设备，它不仅可以帮助我们...
闲鱼搜索规则与技巧 闲鱼最新特...
在闲鱼这个二手交易平台上，有很多用户都希望能够找到一些特殊的东西，比如一些罕见的收藏品、独特的手工艺...
frp内网穿透配置 HTTP ...
HTTP 类型的代理相比于 TCP 类型，不仅在服务端只需要监听一个额外的端口 vhost_http...
广电4k机顶盒怎么连接 广电网...
四广电网络，即四家主流的广播电视网络运营商，包括中国电信、中国移动、中国联通和中国广电，这些运营商为...
hwid是永久激活吗 hwid...
HWID，全称Hardware ID，是硬件识别码的缩写，它是计算机硬件制造商为了区分每一台设备而分...
a100显卡对应的cuda版本
在进行GPU加速的编程中，CUDA是常用的架构和平台，其版本和显卡型号之间存在着一定的对应关系。本篇...
荣耀路由器中继和mesh 荣耀...
荣耀路由器中继连接后网络较慢的问题可能是由于多种原因造成的，以下是一些可能的解决方案： 1. 调整...