恶化了 ，而第二次更改将转化率提高了 ，则该更改总体上不会带来任何改善。因此，应单独观察个体变化。 提供随机引导用户到版本 和版本 的机制 随机性非常重要，因为如果您使用不同的标准，隐藏的相关性可能会导致您得到不正确的结果并据此得出错误的结论。由于分配是随机的，因此您不会获得完全相等的组大小。不用担心这个。这对于您衡量时获得的结果并不重要，例如转化价值 即购买数量除以用户数量的结果 ，或者比较平均购物篮价值或平均利润。 运行测试足够长的时间以使样本有意义并且随机样本足够大 如果你使用的样本太少或者收集的时间太短，你的结论也可能会被扭曲。
例如周和周五可
能有不同的重要事情。最佳测试长度是为版本 和 提供至少数千名用户或持续至少一周的长度。 比较结果并得出结论 如果其中一个版本提供了更好的结果 例如转化率 ，则意味着该更改提高了转化率。使这个版本成为进行下一次更改的基础，并无限期地重复实验。 测试工具 在线商店系统内置的 测试工具获得的结 IT 主管经理电子邮件列表 果示例 以这种方式进行的持续观察将使您能够消除对提高销售量有害的想法并保留那些有价值的想法。 测试 示例 最近，在 网站上以及电子商务博览会期间的一次会议上，一位自称是为移动设备构建在线商店的专家的人士提出了据称在在线商店中实施所需的建议。这个想法是将移动导航按钮放置在屏幕底部，这样用拇指更容易触及它们。
手机中的菜单是最
好的地方 引用的文章建议移动设备上的菜单应位于屏幕底部 为了检查这样的操作是否会提高转化率，我们在 经营的一家服装店进行了一项实验，应用了这样的改变。在 ，我们有一个专门的实验团队，我们称之为 开发人员转换实验室。测试结果一目了然。屏幕底部的菜单使在线商店的转化率降低了 。结果可以用多 奥地利 电话号码 种方式来解释，例如，顾客习惯了顶部的菜单，或者我们不用拇指购物，而是用食指购物。然而，理由是次要的，因为如果更改使转换恶化，则应该简单地撤消更改。移动菜单 屏幕底部带有移动菜单的商店示例 我们在其他四个在线商店中重复了这个实验，每个商店的结果都很明显 这种变化只会恶化而不是提高转化率。
