网站A/B测试实操——改版之前先做实验，别拿全部用户当小白鼠

有个做在线课程的客户，去年非要把注册按钮从橙色改成绿色，理由是「绿色显得环保」。我没拦他，就建议先做个A/B测试再全量上。结果跑了三周，绿色版本注册率反而低了11%，幸好没直接全站换，不然白丢一批用户。这就是A/B测试存在的意义：别拿直觉当数据。

A/B测试的原理不复杂：把用户随机分成两组，一组看老版本、一组看新版本，跑一段时间后对比关键指标，哪个好就上哪个。难点从来不在原理，在实操细节。

第一，一次只改一个变量。很多人喜欢同时换颜色、改文案、调位置，结果数据涨了，你根本说不清是哪个改动起了作用。真想多验证几个东西，就一个个来，或者用多变量测试，别混在一起瞎猜。

第二，样本量要够、时间要跑够。样本太少，随机波动就能骗你；跑一周和跑一天，结果可能完全相反。简单说，让每天的访客量乘以测试天数，误差能控制住就行。网上有现成的样本量计算器，别省这一步。

第三，看什么指标要想清楚。按钮测试看点击率，落地页测试看转化率，别用点击率代替转化率。我接过一个案子，新按钮点击率高了不少，但真正下单的人没变多，原来是把用户引到了更深的页面，属于白折腾。

工具方面，Google Optimize 已经停了，现在国内常见的有 Convert、VWO，自建的话用 PostHog、GrowthBook 这类开源的也能跑。小站点流量不够？那就用「时间分段」代替「用户分组」，上午看A下午看B，凑合能用，但结论要谨慎。

最后说句实在的：A/B测试解决的是「二选一」的问题，解决不了「方向错了」的问题。页面整体思路不对，再优化按钮也白搭。所以我的习惯是，大改版先小流量灰度，小改动才上A/B测试，两者配合着用。

标签： A/B测试 转化率优化 网站运营