黄有璨|如何用A/B测试，给企业增长开挂？ ui|美团

文章插图
图片来源@视觉中国
文 | 深响，作者｜吴鸿键
字节跳动旗下的短视频APP“西瓜视频”，原本叫“头条视频”。但为了让其在短视频行业更具品牌辨识度，团队希望更名。
在经过用户调研和多轮征集筛选后，团队选定4个待选名字进行A/B测试：西瓜视频、奇妙视频、筷子视频、阳光视频。最终的测试结果显示：“西瓜视频”和“奇妙视频”的点击率位列前二，分别比原名称增加了5.22%、5.08%的点击率。结合用户调性等因素综合考量，“头条视频”最终更名为“西瓜视频”。
无独有偶，一次快手内部会议上，联合创始人程一笑在听到“只要公司开放更多资源，营收就能大幅提升”的说法时，也只提了一个要求：先做A/B测试。
上述决策过程反映的，其实是两家数字化时代企业的共同思路：数据驱动、决策不完全依赖个人经验判断。而A/B测试，正是该思路的集合体现。
互联网巨头先行验证大洋彼岸，在Google、Facebook、Netflix、亚马逊的传道下，A/B测试已是风靡硅谷的增长利器。在中国，这一方法论先在头部互联网企业中应用起来。
目前，BAT均以内部自建的方式应用A/B测试。同样，新一代互联网巨头字节跳动、美团、滴滴也都建立了自己的A/B测试平台，比如美团的Gemini、滴滴的阿波罗、今日头条的Libra。
具体应用上，以即时配送业务为例，美团以“提出假设、定义指标、检验假设（A/B测试）、分析学习、发布”五个步骤完成精细化的策略迭代，实现降本增效。类似的逻辑，滴滴应用在城市运营领域、字节跳动则更是把A/B测试应用到了产品命名、交互设计、推荐算法、用户增长、广告优化等方方面面。
罗征曾任腾讯广告副总裁，也在谷歌公司任职八年，目前为“像素偏移” 联合创始人与CEO。据他的观察，目前互联网大厂普遍接受A/B测试的逻辑。在算法层面，技术团队基本都能认同A/B测试的价值。“国内（A/B测试）的起步虽然晚一些，但我不认为国内的发展比国外差。”
但另一重不容忽略的事实是：大厂之外，A/B测试的渗透尚处于早期阶段。
即使是同处于互联网行业的中小企业，A/B测试的应用仍然较少。自建A/B测试平台需要人才和资金，推进A/B测试需要时间，要得出可靠的测试结果需要足够的数据量。这些对于中小企业来说都是稀缺的。
此外，如果业务负责人缺少应用新工具的意识，那么A/B测试再管用，在公司内部也难以推行。而退一步讲，就算创业者乐于尝鲜、想靠外包的方式应用A/B测试，市面上也没有让人一下就能想到的值得信赖的工具品牌。
互联网行业尚且如此，传统行业自不必说。虽然金融行业已有应用A/B测试的案例，但主要针对的还是互联网相关的产品，比如金融类APP上的功能测试。
问题随之而来：产业数字化转型不是当前的大热点吗？既然A/B测试的价值已经得到巨头认可，为什么还没有获得广泛普及？
这既有客观条件的约束，也跟关键位置上的“人”对于A/B测试的感知有关。
对于中小团队来说，A/B测试的成本不菲，无论是时间、研发，还是对应的机会成本。创业公司从0到1的时候，尤其看重迭代速度，晚几天发布版本，目标市场可能就会被对手捷足先登，这样的损失没有人愿意承受。
再者，A/B测试存在较高的技术壁垒。分流是A/B测试的基础，企业需要建立靠谱的A/B测试平台，保证科学的流量分割、流量层直接的正交互斥，使得实验不受干扰。此外，A/B测试平台的指标设计和解读、置信度的统计方法，也对应着不小的研发资源投入。