Web 谷歌网络优化器——多久才能赢得组合?

Web 谷歌网络优化器——多久才能赢得组合?,web,ab-testing,google-website-optimizer,web-optimization,Web,Ab Testing,Google Website Optimizer,Web Optimization,我已经在Google Web Optimizer中运行了六个星期的A/B测试,现在还没有结束。谷歌仍在说:“我们还没有收集到足够的数据来显示任何重要的结果。当我们收集更多的数据时,我们应该能够向你展示一个成功的组合。” 有没有办法告诉我们谷歌离下决心有多近?(有人知道它使用什么算法来决定是否有“高信心赢家”?) 根据谷歌帮助文档: 有时,我们只是需要更多的数据来 能够达到高水平 自信。经过测试的组合 通常需要大约200次转换 让我们来判断它的表现 肯定 但目前我们所有的转换都有200多个对话:

我已经在Google Web Optimizer中运行了六个星期的A/B测试,现在还没有结束。谷歌仍在说:“我们还没有收集到足够的数据来显示任何重要的结果。当我们收集更多的数据时,我们应该能够向你展示一个成功的组合。”

有没有办法告诉我们谷歌离下决心有多近?(有人知道它使用什么算法来决定是否有“高信心赢家”?)

根据谷歌帮助文档:

有时,我们只是需要更多的数据来 能够达到高水平 自信。经过测试的组合 通常需要大约200次转换 让我们来判断它的表现 肯定

但目前我们所有的转换都有200多个对话:

230/4061(原件)
223/3937(变更1)
205/3984(变更2)
205/4007(变更3)

它还要运行多久

谢谢你的帮助

有没有办法告诉我们谷歌离下决心有多近

您可以使用GWO计算器根据您提供的许多假设来帮助确定测试需要多长时间。请记住,您的测试组合之间可能没有显著差异,在这种情况下,测试哪一个是最好的可能需要无限长的时间,因为不可能找到赢家

(有人知道它使用什么算法来决定是否有“高信心赢家”?)

,但在大多数(如果不是全部)统计测试中,存在所谓的p值,即获得与偶然观察到的结果一样极端的结果的概率。GWO测试一直运行,直到p值通过某个阈值,可能是5%。更清楚地说,GWO测试一直运行,直到某个组合明显优于原始组合,这样结果只有5%的几率是偶然发生的


对于你的测试,似乎没有重大的赢家,这是一个平局。

我很抱歉,我对你的问题没有答案,但是如果可以的话,我有一个问题要问你?!!!你是如何找到isomg GWO的,你会推荐它吗?(即易于部署?是否存在性能问题?)!对到目前为止,一切顺利。它非常容易使用,而且非常强大。A/B测试与其说是“如果”,不如说是“什么时候”,而且GWO似乎是一个很好的系统——只要我知道实验什么时候结束就好了!:)我使用这个计算器来计算我需要的数据量,以获得显著性(虽然,对于距离,它使用90%而不是95%),因此,例如,原始与变体2,您需要12000个以上的结果才能得到结论性答案。我不敢相信它会永远持续下去:(谢谢你提供的信息,埃里克!有趣的是,这一页讨论了“非决定性结果”,可能暗示测试可以在没有明确赢家的情况下结束?你怎么看?“可能暗示测试可以在没有明确赢家的情况下结束?”不,这是在说我想说的,也就是说,考试可以永远持续下去,直到你采取行动为止。根据我的经验,你是对的,5%是他们准备宣布胜出的时候。