您的测试工具应该能够确定。虽然您可能会感到困惑并构建大量新版本,但您实际上需要知道与您拥有的级别相比,修改的执行情况如何。测试、测试、测试设置要运行的测试。在收集到所需的样本量之前不要查看它。对于转化率优化器来说,最丢人的事情就是过早地宣布测试结果,却发现一旦样本量很大,结果就发生了变化。
收集结果并评估其重要性一旦达到所需的样本量,您就可以 股东数据 观察测试的进行情况!您的第一反应将是检查测试指标并确定哪个版本“获胜”。但不要太得意忘形。您仍然必须评估两个变化之间的增量差异在统计上是否足够重要。微小的改变可能不是决定性的。
同样,您的测试软件应该明确这一点,。进行所需的更改结果现已可用。我现在应该做什么?如果结果显示挑战者变体优于对照变体,则使更改对所有表单用户永久生效。如果挑战者变体优于对照,我们不应该进行任何调整。如果差异微不足道,则您有选项: