[发明专利]在线服务实验方法、装置、计算机设备和存储介质

权利要求书

1.一种在线服务实验方法，其特征在于，应用于在线服务实验系统中，其中，所述在线服务实验系统包括至少一个实验域，各所述实验域对应一个待评估系统，各所述待评估系统包括待评估对象，所述方法包括：

对所述待评估对象进行参数化处理，得到所述待评估参数；

根据参数关联性对所述待评估参数进行分组，得到分组参数，其中，所述分组参数中包括多个取值组合，每个所述取值组合对应一个实验；

为各所述分组参数所在实验层指定一个请求键值；

当接收到用户请求时，根据所述请求键值确定是否存在与所述用户请求对应的实验，若存在，则将其作为命中实验；并

将所述命中实验对应的取值组合作为生效参数，计算得到实验结果。

2.根据权利要求1所述的方法，其特征在于，所述对所述待评估对象进行参数化处理，得到所述待评估参数，还包括：

检测所述待评估对象的数据类型；

若所述数据类型为参数，将所述待评估对象作为所述待评估参数；

若所述数据类型为非参数，根据引入的预设参数对所述待评估对象进行参数化处理，得到所述待评估参数。

3.根据权利要求1所述的方法，其特征在于，在所述根据参数关联性对所述待评估参数进行分组，得到分组参数之前，包括：

通过参数筛选算法对所述分组参数进行无效筛检，得到筛检后的分组参数。

4.根据权利要求3所述的方法，其特征在于，所述通过参数筛选算法对所述分组参数进行无效筛检，得到筛检后的分组参数，包括：

获取实验配置检查表，其中，所述实验配置检查表中包括多个预设取值组合；

将各所述取值组合与所述预设取值进行对比，并将对比结果一致的取值组合从所述分组参数中删除，得到筛检后的分组参数，其中，当删除所述取值组合时，对应删除所述取值组合对应的实验。

5.根据权利要求3所述的方法，其特征在于，所述通过参数筛选算法对所述分组参数进行无效筛检，得到筛检后的分组参数，包括：

生成实验模拟数据，其中，所述实验模拟数据包括与各所述实验层对应的请求键值；

通过所述实验模拟数据中的请求键值为各所述实验层分配用户请求，并进行模拟实验，得到模拟实验结果，其中，所述模拟实验结果用于指示用户端上传分组参数筛检结果；

根据所述分组参数筛检结果对所述分组参数进行筛检，得到筛检后的分组参数。

6.根据权利要求1所述的方法，其特征在于，在所述将所述命中实验对应的取值组合作为生效参数，计算得到实验结果之后，还包括：

监控所述待评估系统的系统指标；

若所述系统指标出现变化，则判断引起所述系统指标变化的实验，作为异常实验，其中，所述；

根据所述异常实验对所述分组参数进行筛检，并用筛检后的分组参数替换筛检前的分组参数，并重复获取命中实验的操作，直到无法获取异常实验。

7.根据权利要求6所述的方法，其特征在于，所述判断引起所述系统指标变化的实验，作为异常实验，包括：

获取当前实验层的空白实验对应的取值组合关联的历史返回作为参考数据历史；

将所述参考数据历史关联的用户请求作为参考用户行为历史；

以指定的时间周期对所述参考用户行为历史进行分段聚合，得到所述待评估系统的指标参考数据集；

计算所述指标参考数据集在预设置信水平范围内时，所述系统指标的置信下界；

将当前实验对应的参数组合关联的所有历史返回作为实验返回历史；

对预设时间段内的实验返回历史进行聚合，计算出待评估系统指标实验值；

若所述系统指标实验值低于系统指标的置信下界，则将当前所述实验作为所述异常实验。