[发明专利]数据异常检测方法、装置及设备

权利要求书

1.一种数据异常检测方法，其特征在于，包括：

获取待检测的目标业务日志数据；

确定所述目标业务日志数据对应的目标业务信息；所述目标业务信息包括业务服务数量、服务成功数量、服务失败数量、服务时延中的至少一项；

根据所述目标业务信息及预先训练的基森林异常检测器，对所述目标业务日志数据进行异常检测，得到所述目标业务日志数据对应的业务异常信息；所述基森林异常检测器包含多个孤立森林异常检测器；各所述孤立森林异常检测器由多个样本业务日志数据训练得到；

根据所述业务异常信息，确定所述目标业务日志数据是否异常。

2.根据权利要求1所述的方法，其特征在于，所述基森林异常检测器按照以下步骤训练得到：

采集多个所述样本业务日志数据；

按照预设抽取规则，从所述多个样本业务日志数据中抽取出n组数据；各组中分别包含多个第一样本数据；所述n为正整数；

分别针对各组所述第一样本数据训练孤立森林异常检测器，得到n个所述孤立森林异常检测器；

组合n个所述孤立森林异常检测器，得到所述基森林异常检测器。

3.根据权利要求1所述的方法，其特征在于，所述业务异常信息包括业务异常分值；

所述根据所述业务异常信息，确定所述目标业务日志数据是否异常，包括：

若所述业务异常分值小于或等于业务日志数据的基准值，则确定所述目标业务日志数据正常；

若所述业务异常分值大于所述基准值，则确定所述目标业务日志数据异常。

4.根据权利要求3所述的方法，其特征在于，还包括：

利用所述基森林异常检测器对历史业务日志数据进行异常检测，得到所述历史业务日志数据的业务异常分值；

确定所述历史业务日志数据对应的第一业务异常率；

根据所述第一业务异常率，对所述业务异常分值进行取分位数操作，得到所述基准值。

5.根据权利要求1所述的方法，其特征在于，所述获取待检测的目标业务日志数据，包括：

获取指定日志区间内的业务日志数据作为待检测的所述目标业务日志数据；

相应的，所述方法还包括：

根据所述指定日志区间内的所述目标业务日志数据的数据总量及异常数据量，确定所述指定日志区间内的第二业务异常率。

6.根据权利要求5所述的方法，其特征在于，还包括：

当满足以下至少一项条件时，利用新的数据集对所述基森林异常检测器进行更新：

所述第二业务异常率大于或等于第一预设阈值；

所述缓冲区内的业务日志数据的数据量达到第二预设阈值；

其中，所述新的数据集包括所述指定日志区间和/或缓冲区内的业务日志数据；所述缓冲区内的业务日志数据为从所述指定日志区间内抽样得到。

7.根据权利要求6所述的方法，其特征在于，所述利用新的数据集对所述基森林异常检测器进行更新，包括：

分别利用所述基森林异常检测器与各所述孤立森林异常检测器对所述新的数据集中的数据进行异常检测，得到所述基森林异常检测器与各所述孤立森林异常检测器分别对应的检测结果；

确定所述基森林异常检测器对应的检测结果与各所述孤立森林异常检测器分别对应的检测结果之间的检测结果偏差值；

确定满足预设条件的所述检测结果偏差值对应的所述孤立森林异常检测器为待更新的所述孤立森林异常检测器；

利用所述新的数据集对待更新的所述孤立森林异常检测器进行更新。