[发明专利]一种AB测试方法、装置及电子设备

权利要求书

1.一种AB测试方法，包括：

获取多条对照组数据和多条实验组数据，其中，所述多条对照组数据是对采用第一方案的测试对象进行监测得到，所述多条实验组数据是对采用第二方案的测试对象进行监测得到；

对所述多条对照组数据分桶，以得到多桶对照组桶数据，以及对所述多条实验组数据分桶，以得到多桶实验组桶数据；

对所述多桶对照组桶数据分别进行多次重抽样，得到多个第一抽样指标；

对所述多桶实验组桶数据分别进行多次重抽样，得到多个第二抽样指标；

根据各所述第一抽样指标与对应的所述第二抽样指标之间的差异，得到所述多桶对照组桶数据与所述多桶实验组桶数据之间的相对差异量；

根据所述相对差异量，确定所述第二方案相对所述第一方案的显著性；

根据所述显著性，确定所述AB测试的检验功效。

2.根据权利要求1所述的AB测试方法，其中，所述获取多条对照组数据和多条实验组数据，包括：

在多个周期内对采用第一方案的测试对象进行监测，得到各周期的第一监测数据，以及在多个周期内对采用第二方案的测试对象进行监测，得到各周期的第二监测数据；

根据各周期的第一监测数据的集合，确定所述多条对照组数据；

根据各周期的第二监测数据的集合，确定所述多条实验组数据。

3.根据权利要求2所述的AB测试方法，其中，所述方法，还包括：

从测试对象的集合中随机抽取采用第一方案的测试对象，以及随机抽取采用第二方案的测试对象。

4.根据权利要求1所述的AB测试方法，其中，所述对所述多条对照组数据分桶，以得到多桶对照组桶数据，以及对所述多条实验组数据分桶，以得到多桶实验组桶数据，包括：

对所述多条对照组数据进行分桶，生成多桶对照组桶数据；

对所述多条实验组数据进行分桶，生成多桶实验组桶数据；

其中，所述对照组桶数据与所述实验组桶数据的桶个数相同。

5.一种AB测试装置，包括：

获取模块，用于获取多条对照组数据和多条实验组数据，其中，所述多条对照组数据是对采用第一方案的测试对象进行监测得到，所述多条实验组数据是对采用第二方案的测试对象进行监测得到；

分桶模块，用于对所述多条对照组数据分桶，以得到多桶对照组桶数据，以及对所述多条实验组数据分桶，以得到多桶实验组桶数据；

第一抽样模块，用于对所述多桶对照组桶数据分别进行多次重抽样，得到多个第一抽样指标；

第二抽样模块，用于对所述多桶实验组桶数据分别进行多次重抽样，得到多个第二抽样指标；

执行模块，用于根据各所述第一抽样指标与对应的所述第二抽样指标之间的差异，得到所述多桶对照组桶数据与所述多桶实验组桶数据之间的相对差异量；

第一确定模块，用于根据所述相对差异量，确定所述第二方案相对所述第一方案的显著性；

第二确定模块，用于根据所述显著性，确定所述AB测试的检验功效。

6.根据权利要求5所述的AB测试装置，其中，所述获取模块，包括：

监测单元，用于在多个周期内对采用第一方案的测试对象进行监测，得到各周期的第一监测数据，以及在多个周期内对采用第二方案的测试对象进行监测，得到各周期的第二监测数据；

第一归纳单元，用于根据各周期的第一监测数据的集合，确定所述多条对照组数据；

第二归纳单元，用于根据各周期的第二监测数据的集合，确定所述多条实验组数据。

7.根据权利要求6所述的AB测试装置，其中，所述获取模块，还包括：

第一抽样单元，从测试对象的集合中随机抽取采用第一方案的测试对象，以及随机抽取采用第二方案的测试对象。