关于A / B测试的19个最常见问题的答案

A/B测试，也被称为“分割测试”，是衡量(和科学)在线表现的最有效方法之一。这种做法是将一段内容(如登录页面)的两个版本同时运行到同等规模的用户中，以查看哪个页面表现更好。A/B测试在市场营销中非常重要，因为如果执行得当，它们便能够提供给你混凝土有关哪些更改可以为您的公司推动更多转换的证据，而不仅仅是根据亨舍斯的猜测。raybet电子竞技

关于问题的问题如何正确运行A / B测试，然而，似乎在互联网上比比皆是。

因此，为了帮助你和那些正在开始A/B测试的人，我们梳理了Linkedin、Quora和Focus，收集了所有关于A/B测试最常见的问题，并在这里为你收集了答案。我们甚至从Twitter上得到了一些建议(谢谢@hannahnymity.）！所以在这里，你的常见问题解答到A / B测试......潜入！

1)什么时候A/B测试是个好主意?什么时候这是个坏主意?

A/B测试通常会失败，因为测试本身没有明确的目标，所以你必须知道自己在测试什么。使用A / B测试为了测试一个理论，例如 - 将图片添加到此着陆页上增加转换？人是否更有可能点击红色按钮或蓝色按钮？如果我更改标题以强调要约的时间限制怎么办？这些都是可以容易地量化的所有变化。当他们的理论过于模糊时，人们用A / B测试遇到麻烦，就像用多种变体测试两个完全不同的设计一样。虽然可以完成，除非有一个透明的滑坡赢家，否则测试不同的设计可能会导致得出更柔软的结论和关于实际导致转换增加的不确定性。

2）在A / B测试中我应该有多少变化？

假设你作为一个营销团队进行了头脑风暴，你有四个关于登陆页面设计的好主意。同时运行所有四种治疗方法来宣布获胜者是很诱人的，但与上面的变化问题类似，它不是一个真正的A / B测试如果您有多种不同的治疗方法一次运行。每个不同的设计的一些因素可以在那里进入和泥泞的测试结果水域，从而说话。A / B测试的美是其结果是简单和混凝土的。我们建议互相运行两个版本，然后之后运行第二个测试以比较获奖者。将其视为一个真正的技术篮球括号。

3）什么是零假设？

NULL假设是结果的任何差异是采样误差或标准变化的结果。想想抛硬币。虽然你有50/50的硬币降落在头上，但有时，实践中的结果是51/49或由于机会而其他一些变化。尽管如此，你越过硬币，你会越靠近50/50结果。在统计数据中，您证明或反驳了一个想法的方式是争取零假设。争议零假设是运行实验的问题，足以排除偶然结果。该概念也被称为达到统计学意义。

4）对页面有多少访问我需要使用A / B测试获得良好的结果？

在测试A/B测试结果之前，你必须确保测试达到了统计显著性——即你对结果有95%或更多的信心。

好消息是，许多A raybetapp/ B检测工具具有统计学意义，因此您可以在您的测试准备好解释时进行迹象表明。但是，如果您没有，也有许多免费的计算器以及了解统计意义的工具。HubSpot的网站如下，你也可以查看更详细的Excel电子表格在偶尔的剃刀博客上．

5）多变量测试是什么，它如何与A / B测试进行比较？

A/B测试通常用于重新设计，以测试单一设计方向或理论对目标的有效性(如驱动转换)。多变量测试往往用于较长时间内较小的变化。它将使用您的站点的一些元素，并测试这些元素的所有可能的组合，以进行持续优化。在一个1月份邮寄，我的同事Corey Eridon在详细使用另一个测试时解释了差异，说：

如果你需要快速获得有意义的结果，那么A/B测试便是一种很棒的测试方法。因为从一页到另一页的变化非常明显，所以更容易判断哪一页最有效。如果你的网站没有大量的流量，这也是一个正确的方法。由于在多变量测试中要测试多个变量，因此您需要一个高流量的站点来使用MVT获得有意义的结果。

如果您确实有足够的网站流量来提取成功的多变量测试（虽然您仍然可以使用A / B如果您测试全新的设计和布局！）使用测试方法的美好时机是您想要制作的对页面进行微妙的更改，并了解某些元素如何相互交互，以逐步逐步提高现有设计。

6) A/B测试是否会对SEO产生负面影响?

有一种说法认为a /B测试会损害搜索引擎的排名，因为它可能被归类为重复内容，而搜索引擎并不看好这一点。这个流言绝对是假的。实际上，谷歌的哑光削减建议运行A/B测试来改善网站的功能。网站优化器有一个很好地分解了这个神话也是，还有它为什么站不住脚。如果您仍然担心，您可以随时添加一个“无索引”标签到您的变化页面。添加a的详细说明这里可以找到“无索引”标记．

7）我如何以及何时解释我的分裂测试结果？

测试开始。结果开始滚滚而来。你争分夺秒地看谁赢了。但测试的早期阶段是不是开始解释您的结果的正确时间。等到您的测试达到统计学意义（见上文问题4），然后重新审视您的原始假设。测试是否明确证明或反驳了你的假设？如果是这样，您可以开始得出一些结论。当您解释您的测试时，尽量保持纪律归属于归因于所做的具体更改。确保改变和结果之间存在明确的连接，并且在播放中没有任何其他部队。

我应该测试多少变量?

您希望您的A / B测试是决定性的 - 您正在投资它，所以您想要一个清晰可行的答案！一次测试多个变量的问题是您无法准确地确定哪些变量达到差异。So while you can say one page performed better than the other, if there are three or four variables on each, you can’t be certain as to why or if one of those variables is actually a detriment to the page, nor can you replicate the good elements on other pages. Our advice? Do a series of basic one-variable tests to iterate your way to a page you know is more effective.

9）我应该怎么测试？

测试什么取决于你，但我们建议从你的网页的几个基本关键开始。

呼叫致动作：即使是a的单个元素文字-动作，有许多不同的东西可以测试。确保你清楚你要测试的是CTA的哪一方面。您可以测试文本——CTA迫使查看者做什么;位置——CTA在页面上的位置;形状和风格，CTA的样子。例如，在下面的示例中，HubSpot测试了演示CTA的形状和风格，以查看哪种表现更好。形状像按钮的CTA(右边)比包含链轮图像的CTA(左边)表现得更好，使我们的转化率提高了13%。

标题:这通常是观众在您的网站上读取的第一件事，因此影响的可能性很大。尝试在您的不同风格的头条A / B测试．确保每个标题的定位之间的差异很清楚而不是一些简单的字样，因此您可以确定导致更改的原因。
图片:更有效，使用您的产品的人或自己的产品的图像更有效吗？使用备用支持图像测试不同版本的页面，以查看是否有一个操作差异。
复制长度:确实缩短了页面上的文本导致更清晰的消息，或者您需要额外的文字来解释您的报价吗？尝试不同版本的正文文本可以帮助您在转换之前确定读者需要的解释数量。要进行此测试工作，请尝试保留文本类似，只需测试它的音量。

10）你能在网页以外的东西上运行A / B测试吗？

是的！除了着陆页面和网页之外，许多营销人员还在电子邮件，PPC广告系列和呼叫行动上运行A / B测试。

电子邮件:电子邮件测试变量包括主题行、个性化功能和发件人名称等。
PPC：对于付费搜索广告广告活动，您可以A / B测试标题，正文，链接文本或关键字。
商品交易顾问基金:使用CTA，请尝试在页面上更改CTA上的文本，其形状，颜色或放置。

需要更多的想法吗?这篇文章有28个不同的测试你可以运行。

11）如何从类似公司找到/ B检验？

有许多网站在那里聚合A / B检测示例和结果。有些人允许您通过公司类型搜索，并且大多数提供公司如何解释raybet电子竞技测试结果的详细信息。当你第一次入门时，通过这些网站读取一些糟糕的想法，以获得对自己公司测试的内容。raybet电子竞技

哪项测试赢得了：安妮·霍兰德(Anne Holland)的网站“Which Test Won”有一系列的例子和一些年度竞赛，你可以提交自己的测试。
视觉网站优化器：和HubSpot一样，Visual Website Optimizer也提供了A/B测试软件，并且在他们的博客上有很多可雷竞技苹果下载官方版以学习的例子。
abtests.com：该网站不再更新，但它确实有一个很好的测试存档和一些快速的外卖，以及与原始测试导线和写入的链接。该网站由Hubspot UX Director Josh Porter创立，他还有一些关于他个人博客的A / B测试的一些很好的建议，bokardo.com

如果我不相信结果该怎么办?

如果您真的不相信结果并规定了测试的有效性的任何错误或挑战，最好的事情就是再次运行相同的测试。将其视为完全单独的测试，看看您是否可以复制结果。如果您能重复一次又一次地复制，您可能会有一个坚定的结果集。

我应该多久进行一次A/B测试?

观点在这一点各不相同。有一个很好的情况是为了总是在您的网站上进行测试和迭代。只需确定每个测试都有明确的目的，并将导致您的访客和公司的功能更具功能。raybet电子竞技如果您正在运行大量的测试，这导致了最小的结果或轻微的胜利，请重新考虑您的测试策略。

在我的网站上开始A/B测试需要什么?

运行A / B测试的最佳方法是使用为其设计的软件工具。雷竞技苹果下载官方版HUBSPOT提供一在它的一体化营销软件平台。雷竞技苹果下载官方版其他的供应商包括挪兑和视觉网站优化器．如果你不介意修改一些代码，谷歌还有一个免费的工具叫做谷歌分析中的内容实验．它与传统的A / B测试有点不同，但如果您是技术精明，您可以尝试。

15）超越样本大小，还有其他有效性陷阱吗？

MECLABS去年运营了一个很棒的网络诊所，针对一系列超出样本大小的测试有效性的其他威胁。在这篇文章中，Flint McGlaughlin博士介绍了三个测试错误以及如何降低在测试中遇到这些错误的风险。我建议你读一下诊所的完整记录，但这里有几个错误。

历史上的效果:外部世界发生的一些事情对你的测试结果产生了不利的偏见。
仪器效果：测试软件中的错误破坏了测试结果。雷竞技苹果下载官方版

我应该对我的主页进行A/B测试吗?

虽然我不会完全排除一个/ b测试您的主页，但我会说这可能很难运行主页的结论性测试。您的主页从意外使用的访客获得了可变的交通混合，以引导客户。在您的主页上也有一个典型的内容，因此在一次测试中可能具有挑战性，以确定驱使访客行动或不采取行动的内容。最后，由于各种来到您的主页，弄清楚页面的目标，测试可能是一个挑战。您可能会认为您的目标是测试领先客户换算，但如果在测试期间访问的样品对客户而不是潜在客户来说是沉重的，那么您针对该群体的目标可能会改变。如果你想测试你的主页，可以考虑测试你的cta。在企业层面，HubSpot的CTA管理器允许您仅在站点的单个CTA上运行分割测试，而不是在整个页面上。