Testing A/B在推出功能后测试功能

Testing A/B在推出功能后测试功能,testing,statistics,product,ab-testing,Testing,Statistics,Product,Ab Testing,小组的一个问题-如果我们推出一个新的产品功能(比如应用程序上的一个新过滤器),在发布前,我们会看到转化率下降,但在2个月后,我们决定实际测试该功能,结果是现有的变体(发布前)实际上做得比首次展示更糟-您在测试中经历了多少?总结起来的问题是,您观察到用户习惯于新功能的频率有多高(即使是次优的),您如何量化其影响

小组的一个问题-如果我们推出一个新的产品功能(比如应用程序上的一个新过滤器),在发布前,我们会看到转化率下降,但在2个月后,我们决定实际测试该功能,结果是现有的变体(发布前)实际上做得比首次展示更糟-您在测试中经历了多少?总结起来的问题是,您观察到用户习惯于新功能的频率有多高(即使是次优的),您如何量化其影响