如果一种变体在统计上比另一种更好,那么你就有了赢家. 通过禁用 A/B 测试工具中的丢失变化来完成测试. 阅读此博客文章以了解有关样本量和时间的更多信息. HubSpot 的高级软件工程师 Matt Rheault 喜欢将统计意义视为下注. 置信水平的百分比越高,您对结果的把握就越大. 在大多数情况下,您需要最低 95% 的置信水平 -  - 最好是 98% -  - 尤其是在设置时间密集的实验时.
为了不错过任何利润,大多数 AB 测试工具建议向所有用户 (100%) 显示最佳版本,直到更改的页面上线. 在后一种情况下,用户自己使用所见即所得编辑器更改其网站的页面. 使用此类工具,可以更快地开始实施,并且用户可以快速独立工作.