简而言之(相当大)的拆分测试基础知识

已发表: 2018-08-27

简而言之,拆分测试基础知识

在深入了解拆分测试的基础知识之前,让我们先弄清楚一些误解

  • 拆分测试很昂贵。
  • 他们需要大量的技术知识。
  • 它们需要大量的设置时间。

如果这就是阻止您的团队运行 A/B 测试的原因,那么您绝对应该开始。

使用 Google Content Experiments 等基本免费工具设置测试需要几分钟时间(尽管 Google 现在推荐 Optimize 作为他们的测试平台)。

拆分测试的技术专长也是一个较低的门槛。 如果您有人可以为网站插入 Google Analytics 脚本,那么您就有可以为测试代码插入类似脚本的人。

您应该担心的不是技术方面,而是其他一切。 拆分测试应该是多层转换优化计划的一部分。 要以这种方式使用它,您需要了解如何正确使用拆分测试。

为什么公司应该使用拆分测试?

  • 如果您希望启动网站的新页面或部分,或者改善购物车的流程,或者找出人们没有做他们需要做的事情的原因,您不需要拆分测试。 你需要一个可用性测试。
  • 如果您希望确保功能在启动时不会出错,从而导致转化率下降,则不需要拆分测试。 您需要依靠用户验收测试。

在最基本的层面上,当您对如何显示重要页面有两个相互竞争的想法时,您将需要进行拆分测试。

split test-champion vs challenger-graphic

潜在的假设是,您应该有一个定期提出这些想法的过程。 您不应该将拆分测试工作与其他在线营销工作完全分开。

什么是拆分测试?

拆分测试的基本组件是冠军页面和挑战者页面:

冠军

传统上,这是一个高流量页面(因此值得修复),具有高跳出率或低转换率(因此需要挑战者页面)。

挑战者

这通常是一个类似于冠军的页面,但根据有关如何改进页面的理论进行了一些调整。

通常发生的情况是,一半的流量被发送到冠军页面,另一半进入挑战者页面。 跳出率或点击率等一些指标会被测量,随着时间的推移,其中一个页面会获胜。

split test flow diagram

MVT呢?

多变量测试 (MVT) 是拆分测试的近亲。

多变量测试不是在两个页面之间测试一个变量(例如号召性用语的放置或首屏是否存在信任符号),而是在多个页面之间拆分流量,同时测试元素的不同组合。

multivariate test flow diagram

有一个更高的流量栏需要清除以进行有效的多变量测试,但如果您有一个高流量的网站,与对同一页面运行多个拆分测试相比,它可能是测试多个变量的更有效方法。

如果您刚刚开始,暂时不要太担心多变量测试。 在最关键的页面上进行拆分测试会物有所值。

拆分测试需要什么?

开始拆分测试并不需要太多,但您确实需要考虑两件事:

拆分测试工具

如果您没有拆分测试的经验,免费版的Google Optimize可能是一个不错的起点,因此您可以查看它是否符合您的需求。

当您达到使用该工具的上限时,您可以考虑使用付费工具。 您可以从 Optimizely 或 VWO 等工具获取演示。

交通/季节性

您希望尽可能确保站点的流量在测试期间不会发生剧烈变化。 这意味着如果您的流量在假期期间发生剧烈变化,或者您预计流量构成会发生变化,那么拆分测试的可靠性将降低。

avoid seasonality graphic

有哪些公司不应该进行拆分测试?

在您实际运行测试之前,请确保您正在测试可以通过拆分测试实际改进的区域,并且您拥有运行测试的内部资源或可行的第三方来帮助您进行 AB 测试。

  • 如果您没有安装 Google Analytics 或类似工具来寻找可行的页面进行测试,您可能希望延迟运行 AB 测试。
  • 不要测试存在严重错误的区域。 在运行测试之前先解决大问题。
  • 如果您每月进行基于流量的拆分测试的访问次数少于 10,000 到 20,000 次,或者每天的转化次数少于 10 次,则 AB 测试可能还不适合您的组织。
  • 如果您没有人插入脚本,并将测试的获胜者设为网站上的官方版本,您可能希望推迟举行测试。

你如何找到要测试的页面?

有一些东西可以帮助你找到要测试的主要页面:一个网络分析工具、一个调查工具,以及一些关于如何使用这两者的基本技巧。

网络分析

从您的网络分析工具中,您需要过滤到高流量页面,因此该页面值得改进。 但是,如果您找到人们不采取行动的高流量页面,这也会有所帮助,因此您知道自己还有很大的改进空间。 这两件事往往没有那么好相关,所以你必须挖掘一下才能找到那个交叉点。

如果您的网络分析工具是 Google Analytics,您可以使用称为加权排序的便捷功能来查找该交叉点内的页面,从而使搜索页面更容易一些。

民意调查

通过您的调查工具,您需要了解人们正在尝试执行的任务,以及他们在这些任务中的成功程度。 您需要在网站调查中包含一些问题,但最关键的问题是:

  • 您在网站上寻找什么?
  • 你找到你要找的信息了吗?

在网络分析工具中,您会在调查中找到高流量、低交互页面的位置,您需要找到两件事的交集

  • 人们最关心的任务
  • 他们经常失败的任务

找到该交叉点后,您可以在该部分中找到要测试的关键页面。

您应该测试哪些元素?

一旦您根据来自工具或业务优先级的数据确定了“冠军”页面,您就需要形成一个关于如何改进页面的理论。 您可以尝试以下几件事:

  • 标题。 尝试在挑战者页面上使其更清晰。 或者,如果来源在您的控制之下(电子邮件、AdWords 等),则使其与流量来源相匹配。
  • 图像。 尽量让它是真实的(而不是库存照片)。 如果它是一张脸,让它看向号召性用语以引导用户的注意力。
  • 号召性用语 (CTA) 。 尝试不同的位置。 或者尝试添加与网站其余部分使用的调色板的对比,使其脱颖而出。
  • 表单域。 尝试减少挑战者页面上的字段数量。

我应该寻找什么结果?

您可以为拆分测试建立几种不同的目标,具体取决于它是什么类型的页面。

跳出率

如果您正在测试一个入口点或主要用于导航的页面,那么降低跳出率可能是一个可行的目标。

点击到 CTA

如果您有专门的登录页面或产品详细信息页面,请使用增加的 CTA 点击次数来获得转化点。 这最终会带来更好的销售。

但是,这有一个小警告:如果您有多个 CTA,并且它们导致购买具有不同利润率的产品,您应该考虑到这一点。 可以在降低平均订单价值的同时增加 CTA 点击量。

测试应该运行多长时间?

通常,拆分测试应该运行,只要它需要获得 90% 或 95% 的置信度的结果,即获胜者不是基于机会被挑选出来的。

95 percent confidence level graphic

达到这个水平至少需要以下两件事之一:

  • 非常高的数据速率,因此您可以快速交付结果
  • 长时间保持测试,这样即使被测试的页面访问量不大,也可以获得可靠的结果

运行测试的时间越长,季节性流量风险就越高。 您还将接触到您的网站获得的访问者类型集和其他因素的变化。 这就是为什么测试那些往往会获得大量流量的页面通常是个好主意的原因之一,而不管反弹或点击到 CTA 的情况如何。

需要记住的一件事 - 一旦您的工具产生具有正确统计显着性水平的结果,就结束您的测试。 通过让应该已经结束的测试运行,例如搜索引擎惩罚,您会冒额外的风险。

拆分测试是否会给 SEO 带来任何风险?

拆分测试会带来一些小的搜索引擎优化风险,但前提是您将拆分测试的技术方面弄错了。

  • 如果即使您的工具产生了结果,您仍让您的测试无限期地运行,您可能会遇到搜索引擎处罚。 搜索引擎蜘蛛通常喜欢“看到”用户在抓取网站时看到的相同内容。 永远运行的拆分测试基本上与此背道而驰。
  • 当您有一个冠军页面 URL 和一个挑战者页面 URL 时,将冠军页面指向为“规范”URL 通常是一种很好的做法。 如果您不熟悉内部“rel=canonical”之类的工具,请确保您与可以使用它的公司合作,以确保您的拆分测试遵循最佳实践。

拆分测试的局限性是什么?

虽然拆分测试很棒,但如果您对它的期望比它适合提供的更多,那么您很快就会达到它的实用性的上限。 拆分测试不能很好地解决一些问题:

达到全局最大值

拆分测试将逐步使您达到当前网站设计所允许的局部最大值。 除此之外,您可能需要重新设计网站 - 拆分测试不会让您到达那里。

修复基本站点问题

AB 测试往往有利于个别页面的改进。 如果您遇到大型菜单问题和路径损坏等大规模问题,拆分测试不会对您有很大帮助。

缺乏转化优化计划

当管理层有时间将拆分测试作为一种爱好而不是程序时,它会在蓝月亮中运行一次。 您将获得一些收益,但您不会获得通常从适当的转化率优化计划中看到的动力。 拆分测试作为一个孤立的工具不会走得太远——您需要一个包含拆分测试的 CRO 程序。

避免拆分测试陷阱

拆分测试是改善网站关键路径的好方法——无论是人们倾向于跳出的导航页面,还是缺乏点击 CTA 会损害业务的自定义登录页面。

当您将原始页面作为冠军并将您正在测试的想法作为挑战者时,您可以在使用数据时解决很多争论。 这节省了公司的时间和精力,而不是在部门间就网站上的工作原理进行旷日持久的争论。

也就是说,您确实需要避免一些陷阱:

  • 当您需要的是可用性测试时,不要使用拆分测试。
  • 当您需要的是用户验收测试时,不要使用 AB 测试。
  • 不要假设拆分测试自动适合您。 先看看你的数据。
  • 如果您无法将诸如 Google Analytics 脚本之类的内容添加到站点,请不要尝试使用拆分测试。
  • 如果您正在测试的页面没有明确的目标,请不要使用 AB 测试。
  • 不要让拆分测试运行的时间超过它们需要运行的时间。 存在罚款风险。
  • 不要将运行拆分测试与转换率优化策略混淆。

如果您开始将定期拆分测试作为更大转换计划的一部分,您可以为您的网站获得相当可观的收益。

博客页脚 Cta1