[发明专利]一种基于随机分流的A/B测试方法

权利要求书

1.一种基于随机分流的A/B测试方法，其特征在于，所述方法包括如下步骤：

a)在各个版本的客户端页面系统中配置测试变量，并对所述测试变量设置不同的标签，对具有所述测试变量的各个版本中引入SDK；

b)客户端页面上线，对访问所述各个版本客户端页面的用户进行第一次分流，将分流后的用户分别传输到不同的服务器；

c)每个所述服务器中的所有用户根据用户操作进行第二次分流，按照所述测试变量的标签将具有相同操作的用户作为一组；

d)根据步骤c)中的分组进行客户端页面系统的不同版本进行测试分析，选出最佳的客户端页面系统，其中，

所述测试分析按照如下方法进行测试：

d1)计算不同组之间的测试平均效果估计值；

d2)根据计算得到的平均效果估计值，得到测试结果；

所述平均效果估计值通过计算，其中P为平均效果估计值，为第一组用户对第二组用户操作的测试变量的平均潜在值，为第二组用户相对于第一组用户操作的测试变量的平均潜在值。

2.根据权利要求1所述的方法，其特征在于，所述各个版本的每两个版本的客户端页面系统之间配置单一测试变量。

3.根据权利要求1或2所述的方法，其特征在于，所述测试变量为客户端页面系统的可视化操作部件。

4.根据权利要求1所述的方法，其特征在于，所述第一次分流为随机分流。

5.根据权利要求1所述的方法，其特征在于，所述第一组用户对第二组用户操作的测试变量的平均潜在值通过如下方式计算：

其中N₁为第一组用户的数目，Y_1i为第一组用户中第i个用户对第二组用户操作的测试变量的潜在值。

6.根据权利要求1所述的方法，其特征在于，所述第二组用户对第一组用户操作的测试变量的平均潜在值通过如下方式计算：

其中N₂为第二组用户的数目，Y_2i为第二组用户中第i个用户对第一组用户操作的测试变量的潜在值。

7.根据权利要求1所述的方法，其特征在于，若所述平均效果估计值P＞0，则第二组用户操作的测试变量所属的客户端页面系统胜出；

若所述平均效果估计值P＜0，则第一组用户操作的测试变量所属的客户端页面系统胜出。