如何计算你的A/B测试样本量在5个简单的步骤

A / B测试是一个基本的过程,允许你测试你的网站的各种元素的区域,看看哪些技术或设计为你的公司带来最好的结果。

但是为了进行一项能够让你收集到能够推动收益优化的数据的测试,你需要选择最佳的a /B测试样本量。

幸运的是,我们将在这篇博文中讨论如何计算A/B测试的样本量,所以请继续阅读!

别忘了注册我们的免费通讯当你在这里加入超过20万其他营销人员谁得到专家营销建议和更新直接发送到他们的收件箱!

不要错过我们的营销经理内部邮件!

加入200000年聪明的营销人员,让本月最热门的营销新闻和见解直接发送到您的收件箱!

请在下面输入您的电子邮箱:

(别担心,我们永远不会分享你的信息!)

理解A/B测试的样本量和时间框架

完善你的A/B测试计划并非易事。所以,在我们深入研究如何计算你的A/B测试样本量之前,我们将分解测试过程是如何工作的。

当你进行A/B测试时,你实际上是在测试你网站的某个区域营销策略

例如,假设您想测试您的两个版本电子邮件主题看哪一种打开率最高。

在这种情况下,你将把第一个主题显示给电子邮件列表中标记为“a”的部分。然后,你将第二主题发送到电子邮件列表中标记为“b”的另一部分。

在测试之后,您将发送具有最高打开率的主题行到您的其他订阅者列表。

一旦你决定了你想要测试什么,你的下一步是确定你的样本大小和时间范围。

A/B测试样本量是多少?

A/B测试样本量是指会看到你想要测试的元素的人数。从上面的主题行例子,你的样本量是电子邮件用户您将发送两种不同的主题行。

根据要测试的元素,样本量可能有所不同。例如,在测试网站的元素时,您可能有更大的样本量,例如行动呼吁图片或标题副本。

另一方面,如果你正在测试你的电子邮件主题行,你可能希望你的样本量更小,这样打开率最高的主题行就会被大多数订阅者所接受。

什么是A/B测试时间框架?

A/B测试时间框架是测试将运行的时间量。与样本量一样,时间范围也可以根据您想测试的元素而变化。

例如,您可能会为CTA按钮测试一个月或更长时间的新颜色。另一方面,您可能只运行主题行测试一两个小时,然后将获胜的主题行发送给其他订阅者。

如何计算A/B测试样本量

正如我们上面提到的,一个样本量或时间范围并不适合您运行的每个测试。那么,让我们深入研究一下如何确定最佳样本量和时间框架。

以下是如何计算A/B测试样本量:

  1. 考虑是否有足够大的联系人列表来提供样本
  2. 使用A/B测试样本量计算器
  3. 在计算器中输入你的转化率和最小可检测效果
  4. 查看结果
  5. 如果需要,计算样本容量的百分比

1.考虑是否有足够大的联系人列表来提供样本

执行成功的a /B测试的关键是获得统计上显著的结果,使您能够收集深入的见解。

换句话说,如果你对极少数的网站访问者或电子邮件订阅者进行测试,你将无法收集到足够有意义的数据来确定哪个版本的测试最成功。

同样重要的是,测试你的电子邮件列表或网络访问者的最小部分,以获得重要的结果,这样你就可以对大多数观众实施获胜的测试。

所以,为了A/B测试你的列表或网站访问者的样本,将给你有意义的结果,你需要一个像样的电子邮件列表或大量的网络流量。

我们建议至少有1000名观众参与你的A/B测试。对于任何比这更小的数据,你的样本量需要是总受众的大多数,才能给你足够有意义的结果。

如果是这种情况,那么从测试中看到获胜元素的剩余观众数量将非常少,您不妨在整个网站上实现新更改,以便让所有观众都能看到发生了什么。

2.使用A/B测试样本量计算器

计算A/B测试样本量的下一步是找到A/B测试样本量计算器。与其学习A/B测试样本量公式,不如使用免费计算器来做这件事。

市面上有很多方便的计算器,可以让你轻而易举地确定样本大小,比如下面这个优化

A/B测试样本量计算器

有些计算器还可以帮助你确定考试的最佳时间框架。一旦你找到了你喜欢的计算器,是时候输入一些细节来得到你的样本大小。

3.在计算器中输入你的转化率和最小可检测效果

如果你使用Optimizely的A/B测试样本量计算器,你需要输入两个细节,然后才能了解测试的最佳样本量:

  • 基准转化率:基准转化率是控制组的预期转化率。你的对照组是指浏览你的网站或营销信息的当前元素的人数。
  • 最小可检测效应:最小的可检测效应是最小的相对变化转化率您希望能够从正在测试的新元素中进行检测。

4.查看结果

如何计算A/B测试样本量的下一步是查看结果。

在您选择的计算器中输入所有必要的元素后,它将显示您测试的最佳样本量。

A/b测试样本量计算器结果

这是你想要测试你的新元素的观众总数,以获得有意义的结果,使你能够优化未来的策略。

5.如果需要,计算样本容量的百分比

根据您的A/B测试和您使用的计算器,您可能需要计算您的A/B测试样本量的百分比。

例如,如果要运行电子邮件主题行测试,则可能需要选择要对其运行测试的电子邮件订阅者总数的百分比。

要计算此数字,请使用百分比A/B测试样本量公式:

样本量/ 1000 =样本量百分比

哈!现在你已经有了样本大小,可以开始你的A/B测试了优化你的网站和营销策略,更多的线索和转化!

如何为你的A/B测试选择最佳的时间框架

现在您知道了如何确定测试的最佳样本量,那么如何找到测试应该运行多长时间的最佳时间框架呢?

A/B测试时间框架可以根据您想要测试的元素以及您自己的业务目标而变化。

例如,假设你想在新年开始时在你的网站上实现一个新的CTA按钮。在这种情况下,你可能想要在10月或11月完成A/B测试,这样你就可以及时在你的网站上实现获胜版本。

如果你发送一个邮件A/B测试在美国,查看你过去的电子邮件数据来找到测试的最佳时间通常是一个好主意。查看您的数据,以确定您的点击和打开开始下降的时间。

然后,确保您运行您的测试,并在测试前几小时将获胜的电子邮件版本发送给您的整个订阅者列表,以便您可以最大限度地增加点击和打开次数。

是时候提升你的销量了

我们的服务清单可以帮助您发展业务的各个方面,营销策略已被证明可以增加收入和转化率等底线指标。

在过去的5年里,我们做到了1290万年我们客户基础上的交易。

需要帮助确定您的A/B测试样本量?

完美的奔跑A / B测试显示你需要的数据,以改善你的活动以获得更好的结果,这不是一件容易的事情。

如果你觉得很难选择最佳的A/B测试样本量,或者根本没有时间运行和分析测试,WebFX的数字营销专家可以帮助你。

节省宝贵的时间,并与拥有超过160万小时经验的团队一起实施数据支持的营销策略。

在线联系我们或致电888-601-5359了解更多关于我们的团队如何帮助您的公司制定营销战略,推动收入!

WebFX职业

加入我们的使命,为全球各地的企业提供行业领先的数字营销服务-同时建立您的个人知识和个人成长。

我们招聘!
查看30+职位空缺!