SEO中的假设检验及其统计意义-白板＆星期五

A/B测试您的SEO更改可以带给您竞争优势，并且可以避免负面更改而降低您的访问量。在本周五的白板中，艾米莉·波特（EmilyPotter）不仅分享了为什么A/B测试您的更改很重要，而且还分享了如何建立假设，收集和分析数据的内容以及得出结论的想法。

单击上方的白板图像，在新选项卡中打开高分辨率版本！

视频转录

莫兹迷，您好！我是EmilyPotter，我在蒸馏的在我们伦敦办公室。今天，我将与您讨论SEO中的假设检验及其统计意义。

在Distilled，我们使用称为ODN的平台蒸馏优化交付网络，进行SEOA/B测试。现在，在此，我们使用假设检验。您可能无法部署ODN，但是今天我仍然认为您可以从我所谈论的内容中学到一些有价值的东西。

假设检验

假设检验的四个主要步骤

因此，当我们使用假设检验时，我们使用四个主要步骤：

1. 首先，我们提出一个假设。
2. 然后，我们收集关于该假设的数据。
3. 我们分析数据，然后…
4. 最后，我们得出一些结论。

A/B测试最重要的部分是有很强的假设。因此，在这里，我已经讨论了如何制定强有力的SEO假设。

1.形成假设

帮助提出假设的三种机制

现在我们需要记住，使用SEO，我们试图影响三件事以增加自然流量。

1. 我们要么试图提高自然点击率。因此，您所做的任何更改都会使您在SERP中的出现对您的竞争对手更具吸引力，因此会有更多人点击您的广告。
2. 或者，您可以提高自然排名，从而使自己更高。
3. 或者，我们也可以为更多关键字排名。

您也可能会同时影响所有这三个方面。但是，您只想确保其中之一明确成为目标，否则就不是真正的SEO测试。

2.收集数据

接下来，我们收集数据。同样，在Distilled，我们使用ODN平台执行此操作。现在，使用ODN平台，我们进行了A/B测试，并将页面分为统计上相似的存储桶。

使用控件和变体进行A/B测试

因此，一旦执行了此操作，我们将使用变量组，然后使用数学分析来确定如果不进行更改，我们认为变量组会做什么。

所以在这里，我们有黑线，那就是这样做的地方。它可以预测如果我们不做任何更改，模型会认为变体小组会做什么。这条虚线是测试开始的时间。这样您可以在测试后看到分离。蓝线实际上就是发生的情况。

现在，由于这两行之间存在差异，因此我们可以看到一个变化。如果我们移到这里，我们就绘制了这两条线之间的差。

由于蓝线高于黑线，因此我们将其称为正面测试。现在，这里的绿色部分是我们的置信区间，作为标准，这部分是95％的置信区间。现在我们使用它，因为我们使用统计测试。因此，当绿线全部位于零线上方，或者所有绿线都位于零线以下（用于阴性测试）时，我们可以将其称为统计显着性测试。

对于这个，我们最好的估计是，这将使会议增加12％，大约每月大约有7,000次自然会议。现在，在这里的任何一侧，您都可以看到我写了2.5％。那就是使所有这些加起来等于100，其原因是您永远不会获得100％的自信结果。总是有机会，有随机的机会，而您有错误的否定或肯定的判断。这就是为什么我们然后说我们有97.5％的信心这是积极的。那是因为我们有95加2.5。

没有统计意义的测试

现在，在Distilled，我们发现在许多情况下我们的测试在统计上并不重要，但是有充分的证据表明它们有所提高。如果我们移到这里，我有一个例子。因此，这是一个没有统计学意义的示例，但我们看到了强劲的增长。

现在您可以看到我们的绿线中仍然有一个负值区域，这表示在95％的置信区间内，这仍然是一个负测试。现在，如果我们再次在下面放下，我又做了粉红色。因此，我们双方都有5％的权益，我们可以在这里说我们有95％的信心取得了积极的结果。这是因为该5％始终也高于该值。

3.分析数据以检验假设

现在，我们这样做的原因是尝试并能够实施我们有很强假设的变更，并且能够从中获得胜利，而不仅仅是完全拒绝。现在造成这种情况的部分原因还在于我们说我们在做生意而不是科学。

在这里，我创建了一个图表，该图表说明了我们何时可能会部署统计意义上不重要的测试，这是基于假设的强弱程度以及更改的便宜程度或昂贵程度。

强有力的假设/廉价的改变

现在在这里，在您的右上角，当我们有很强的假设和廉价的更改时，我们可能会部署它。例如，我们最近与Distilled的一位客户进行了这样的测试，他们将主关键字添加到H1中。

最终结果看起来像此图。这是一个强有力的假设。实施起来并不是一项昂贵的更改，我们决定部署该测试，因为我们非常有信心那将仍然是积极的。

虚假假设/廉价变动

现在，从另一方面来说，如果您的假设很弱，但价格仍然便宜，那么也许有证据表明仍是采用该假设的理由。您必须与客户沟通。

强有力的假设/昂贵的改变

在具有强大假设点的昂贵变更中，如果您根据要达到的百分比变化来计算预期收入，则必须权衡从投资回报中获得的收益。

虚假假设/廉价变动

如果假设不充分且变化巨大，那么我们仅在统计意义重大的情况下才需要部署它。

4.得出结论

现在我们需要记住，当我们进行假设检验时，我们所做的只是尝试检验原假设。这并不意味着无效结果意味着根本没有效果。这意味着我们不能接受或拒绝该假设。我们说的是，这太随机了，以至于我们不能说这是真的。

现在95％的置信区间可以接受或拒绝该假设，我们说的是数据不是噪音。当它的置信度小于95％时，就像我们在这里所说的那样，我们不能说我们通过科学测试就能学到一些东西，但是我们仍然可以说我们有很充分的证据表明这将产生积极的影响。在这些页面上的效果。

测试的优势

现在，当我们与客户讨论此问题时，这是因为我们的真正目标是在这里提供与其他垂直行业相比的竞争优势。现在，测试的主要优势是避免那些负面变化。

我们只想确保所做的更改不会使流量真正下降，而且我们看到了很多。在Distilled，我们称之为躲闪的子弹。

现在，这是我希望您能从事的工作，并能够与您的客户或您自己的网站一起使用。希望您可以开始提出假设，即使您无法部署ODN之类的东西，如果所做的更改正在帮助或损害流量，您仍然可以使用GA数据来尝试并获得更好的主意。这就是我今天为您准备的全部。谢谢。

视频转录通过Speechpad.com