渗透率|如何评估付费会员项目价值？这个方法免费送给你

编辑导语：在渗透式项目中，往往需要通过测试对照来支撑运营快速决策，那么哪一种测试对照才是科学有效的呢？本文从全量的AB测试对照的局限性出发，提出了一种全新的付费会员对照评估方法，一起看看吧。

文章插图
一、现状问题随着业务的发展，我们发现AB测试的全量对照存在较大的局限性，比如在渗透式项目这种场景下，由于项目前期渗透率较低，通过全量的AB测试对照往往会导致整体增量价值不高，无法支撑运营快速决策是否可以持续投入项目。
什么是渗透式项目？
渗透式项目是特指在运营周期内，可预见性地无法快速达到高用户渗透率的产品，例如付费会员、积分等。它往往跟常规的AB测试中文案调整、UI优化等元素对实验组用户可以100%影响的项目相对。
二、解决方案根据翻阅行业内的相关资料，笔者无法在行业内找到已经落地的可行的解决方案，于是沿着这个问题进行思考。
解决这个问题的核心点在于：
找到渗透节点的用户的对照组，对比两类用户的用户价值数据。
什么是渗透节点？
可以理解为，渗透式项目的用户核心行为节点即为渗透节点。例如：付费会员项目对应的「购买付费会员」行为节点，积分项目的对应「领取积分」行为节点。
评估步骤：
经过思考，找到了一个方法，由于行业内没有找到其他人有发表过这种方法，暂且将此对照方法命名为「碧落对照法」，具体步骤如下：
1. 数据测试根据常规AB测试方法对渗透式项目进行测试（这里不对AB测试的知识做展开介绍，不理解的同学自行搜索学习）。
假设该项目分两组，分别是实验组A及对照组B
2. 数据回收1）回收AB组分别的大盘实验进入用户数及用户价值数据。

文章插图
2）回收实验组中渗透节点的用户数及用户价值数据。
3.数据分析1）AB组渗透节点的用户增量价值评估
实验组A未渗透人群数量及价值测算：假设实验组A未渗透的用户数及对于的用户价值为a3和A3，那么：a3=a1-a2，A3=A1-A2。
对照组B理论上渗透/未渗透用户数量测算：假设a2和a3在对照组B中分别有两组用户对应，理论上用户数量比例应当一致，我们假设对应的为b2和b3，那么：b2=a2*（a1/b1），b3=a3*（a1/b1）=b1-b2。

对照组B理论上未渗透人群价值测算：理论上，b3人群跟a3人群的人均价值一致，我们将b3人群的总用户价值定义为B3，那么：B3=b3*（A3/a3）。
对照组B理论上渗透人群价值测算：根据上述数据，很容易得出对照组B理论上渗透人群价值，我们认定为B2，即B2=B1-B3。

实验组A渗透节点的用户增量价值测算：
△实验组A渗透节点用户增量价值提升比例=（b2*A2/a2-B2）/B2

文章插图

文章插图
2）AB组大盘用户价值数据对比
实验组A大盘用户增量价值测算：△实验组A大盘用户增量价值提升比例=（b1*A1/a1-B1）/B1

文章插图
【渗透率|如何评估付费会员项目价值？这个方法免费送给你】3）预估渗透式项目的渗透率上限，以此预估在高渗透率下项目的理论增量价值
假设该项目预估渗透率上限为X，显然：1≥X≥a2/a1。假设在该渗透率状态下，a2和a3人群各自的人均价值不变（实际上，随着渗透率的逐步提高，两类用户的人均价值均有可能下降），那么，在该项目渗透率状态下，大盘的用户增量价值将在新的状态下得到整体的提高，测算逻辑跟现有状态下测算一致。