Web 不同的网站A/B测试是否会干扰测试';结果如何?

Web 不同的网站A/B测试是否会干扰测试';结果如何?,web,ab-testing,Web,Ab Testing,我有一个关于对网站上的不同页面运行a/B测试的问题,以及我是否应该担心它们会干扰测试结果。这并不重要,但我正在使用VisualWebsiteOptimizer进行测试 例如,如果我有两个A/B测试在订单放置流中的不同页面上运行,那么我是否应该担心这些测试会对相同转换目标的另一个目标转换率产生影响?例如,我在一个网站上运行了两个测试,一个针对产品详细信息页面,另一个在购物车上运行。最后,我想知道这两个页面的变化是否会影响下单转换率。我不确定如果不同测试的结果同时运行,我是否应该关心它们之间的相互干

我有一个关于对网站上的不同页面运行a/B测试的问题,以及我是否应该担心它们会干扰测试结果。这并不重要,但我正在使用VisualWebsiteOptimizer进行测试

例如,如果我有两个A/B测试在订单放置流中的不同页面上运行,那么我是否应该担心这些测试会对相同转换目标的另一个目标转换率产生影响?例如,我在一个网站上运行了两个测试,一个针对产品详细信息页面,另一个在购物车上运行。最后,我想知道这两个页面的变化是否会影响下单转换率。我不确定如果不同测试的结果同时运行,我是否应该关心它们之间的相互干扰

我的直觉告诉我,我们不必担心它,因为每个页面上的访问者将分布在另一个页面的每个变体上。因此,产品详细信息页面版本A访问者将分布在购物车的A和B变体中,因此,即使访问者从其他测试中看到购物车的不同版本,产品详细信息页面的变体A对订单转换的影响仍将得到正确测量。当然,我可能完全错了,希望有统计背景的人能更准确地回答这个问题

我能想到的唯一问题是,一个页面的变体和另一个页面的变体之间的组合比其他组合更有效。但这似乎不太可能


我不确定我是否解释得足够清楚,所以请让我知道我的问题是否有意义。我在网上和Stackoverflow上搜索了答案,但我没有找到任何答案。

我理解你的问题,没有快速的答案,这取决于你正在运行的测试类型。有时,不同页面上的A/B测试会相互影响,特别是如果它们处于相同的操作序列中,例如签出

一个简单的例子,如果在您的第一页上,变体A显示“单击此处查看定价”,变体B显示“单击此处获取500美元现金”。你可能会发现点击B的次数更高,并宣布这一次成功。用户单击后,在下一页上,将要求输入他们的信用卡详细信息,变化为“支付”按钮为绿色或红色。在这种情况下,变体a中的人可能有更好的机会实际输入他们的CC详细信息并转换,而变体B中的人可能会感到受骗

我注意到,当网站处于萌芽阶段,他们试图了解客户的反应时,这些多变量测试变得更加重要。然而,当存在一些稳定性和流量时,变化往往非常微妙,总体消息和流是相同的,A/B测试变得更加微观细化。在这种情况下,多页交叉测试的价值可能会降低(第一页的背景颜色是否意味着过程中的三页内容?可能不是!)

希望这个答案有帮助