[发明专利]基于AB测试结果的数据分析方法、装置、设备及介质

说明书

本公开公开了一种基于AB测试结果的数据分析方法、装置、设备及介质，涉及计算机技术领域，尤其涉及机器学习领域。具体实现方案为：在第一时间段内，将测试应用和当前应用分别提供给实验组和对照组进行AB测试，其中，测试应用与当前应用之间具有至少一项差异应用功能；根据实验组和对照组在第一时间段内的留存率，预测实验组和对照组在第二时间段内的留存率指标值，第一时间段小于第二时间段；根据实验组和对照组在第二时间段内的留存率指标值，计算实验组和对照组之间的留存率指标绝对差值；根据留存率指标绝对差值，确定测试应用中所述差异应用功能的效果，可以综合性对且长期性对更新应用功能的测试应用进行效果衡量。

技术领域

本公开涉及计算机技术领域，具体涉及机器学习领域，尤其涉及一种基于AB测试结果的数据分析方法、装置、设备及介质。

背景技术

随着计算机技术的快速发展，应用产品上线后需要不断更新应用功能，以满足人们日益多样化的需求。通常，在应用功能更新时，需要进行应用产品效果评估，以预先分析新增应用功能对应用产品的影响。

但是，应用产品通常包括多种应用功能，对于综合性应用产品而言，改动某个应用功能，会造成其他应用功能的收益增多或者减少。现有技术中，通常根据改动的应用功能进行应用产品效果评估，而无法对应用产品进行综合性效果评估，存在片面性与局限性。

发明内容

本公开提供了一种基于AB测试结果的数据分析的方法、装置、设备及介质。

根据本公开的一方面，提供了一种基于AB测试结果的数据分析方法，包括：

在第一时间段内，将测试应用和当前应用分别提供给实验组和对照组进行AB测试，其中，测试应用与当前应用之间具有至少一项差异应用功能；

根据实验组和对照组在第一时间段内的留存率，预测实验组和对照组在第二时间段内的留存率指标值，第一时间段小于第二时间段；

根据实验组和对照组在第二时间段内的留存率指标值，计算实验组和对照组之间的留存率指标绝对差值；

根据所述留存率指标绝对差值，确定测试应用中所述差异应用功能的效果。

根据本公开的另一方面，提供了一种基于AB测试结果的数据分析装置，包括：

AB测试模块，用于在第一时间段内，将测试应用和当前应用分别提供给实验组和对照组进行AB测试，其中，测试应用与当前应用之间具有至少一项差异应用功能；

留存率指标值预测模块，用于根据实验组和对照组在第一时间段内的留存率，预测实验组和对照组在第二时间段内的留存率指标值，第一时间段小于第二时间段；

留存率指标绝对差值计算模块，用于根据实验组和对照组在第二时间段内的留存率指标值，计算实验组和对照组之间的留存率指标绝对差值；

功能效果确定模块，用于根据所述留存率指标绝对差值，确定测试应用中所述差异应用功能的效果。

根据本公开的另一方面，提供了一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本公开所提供的基于AB测试结果的数据分析方法。

根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行本公开所提供的基于AB测试结果的数据分析方法。

根据本公开的另一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现本公开所提供的基于AB测试结果的数据分析方法。