谷歌、微软、亚马逊6个惊人的A/B测试实例

如果你认为一件事情会发生，然后它真的发生了，那么你不会学到什么。如果你认为一件事情会发生，但没有发生，那么你会学到一些重要的东西。如果你原本认为一件事情不值一提，但它带来了惊人的或突破性的结果，那么你会学到一些非常有价值的东西。 

必应和社交网络（如脸书和推特）相结合的尝试，是一个没有达到预期效果的例子——这一尝试在历经了长达两年的多个结果显示无价值的实验后告弃。

虽然经久的进步来自持续的实验和很多小的改进（如必应广告的例子所示），但这里介绍的几个有惊人效果的例子表明了我们有多不擅长预估想法的价值。 

01 UI实例：41阶蓝

谷歌和微软的很多例子都一致显示：小的界面设计决策也可能有重大的影响。谷歌在搜索结果页面上测试过41个阶度的蓝色，这让当时的视觉设计负责人很受挫。

然而，谷歌对配色方案的调整给用户活跃度带来了实质性的提高（谷歌没有报告单一改动的结果），并促成了之后设计团队和实验团队的高度协作关系。

微软的必应也做过类似的配色改动，帮助用户更成功地完成任务，改善了任务成功需时，将美国市场的年营收提高了超过1千万美金。 

这些都是微小改动带来巨大影响的很好的例子，但由于配色方案已经被广泛地测试，在更多实验中“玩”配色已不太可能带来更加显著的改进。 

02 在正确的时机显示推广

2004年，亚马逊在主页上放置了信用卡推广，该推广带来了可观的利润，但是点击率（Click-Through Rate, CTR）很低。团队进而运行了把该推广移至购物车页面的实验，用户把商品加入购物车后，可以看到一个简单的计算，从而对该信用卡带来的优惠额度一目了然，如图1.5所示。