[发明专利]日志异常检测方法、装置、计算机设备和存储介质有效
申请号: | 202110595200.6 | 申请日: | 2021-05-28 |
公开(公告)号: | CN113282920B | 公开(公告)日: | 2023-10-10 |
发明(设计)人: | 黄道旭;赵星;张之浩;姜宇诠 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F21/55 | 分类号: | G06F21/55;G06F21/57;G06F18/214;G06F18/241;G06F16/18 |
代理公司: | 深圳市力道知识产权代理事务所(普通合伙) 44507 | 代理人: | 张传义 |
地址: | 518057 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 异常 检测 方法 装置 计算机 设备 存储 介质 | ||
1.一种日志异常检测方法,其特征在于,包括:
获取待检测的目标日志数据,所述目标日志数据包括基于第一采集周期采集的第一日志数据以及基于第二采集周期采集的第二日志数据,所述第一采集周期大于所述第二采集周期;
将所述第一日志数据输入第一日志分类模型进行分类预测,获得所述第一日志数据对应的第一日志分类结果,以及将所述第二日志数据输入第二日志分类模型进行分类预测,获得所述第二日志数据对应的第二日志分类结果;
根据所述第一日志分类结果与所述第二日志分类结果,确定所述目标日志数据中是否存在异常日志数据。
2.根据权利要求1所述的日志异常检测方法,其特征在于,所述第一日志分类模型包括至少一个第一提升树模型与至少一个第二提升树模型;
所述将所述第一日志数据输入第一日志分类模型进行分类预测之前,还包括:
获取待训练的样本日志数据,所述样本日志数据为基于所述第一采集周期采集的;
根据所述样本日志数据,确定每一轮训练的训练样本数据,将当前轮训练样本数据分别输入每个所述第一提升树模型与每个所述第二提升树模型进行日志分类训练,获得所述当前轮训练样本数据对应的第一训练结果与第二训练结果;
根据所述第一训练结果与所述第二训练结果,确定所述当前轮训练样本数据对应的目标训练结果;
基于预设的损失函数,确定所述目标训练结果对应的损失函数值;
若所述损失函数值大于预设的损失值阈值,则调整每个所述第一提升树模型和每个所述第二提升树模型的参数,并进行下一轮训练,直至得到的损失函数值小于或等于所述损失值阈值,结束训练,得到训练好的所述第一日志分类模型;
所述将所述第一日志数据输入第一日志分类模型进行分类预测,包括:
将所述第一日志数据输入训练好的所述第一日志分类模型进行分类预测。
3.根据权利要求2所述的日志异常检测方法,其特征在于,所述根据所述第一训练结果与所述第二训练结果,确定所述当前轮训练样本数据对应的目标训练结果,包括:
根据所述第一训练结果中的第一预测类别与所述第二训练结果中的第二预测类别,确定目标预测类别;
对所述第一训练结果中的第一预测概率与所述第二训练结果中的第二预测概率进行累加,并对得到的累加值求平均值,获得平均预测概率;
根据所述平均预测概率与所述目标预测类别,确定所述目标训练结果。
4.根据权利要求1所述的日志异常检测方法,其特征在于,所述将所述第一日志数据输入第一日志分类模型进行分类预测,包括:
调用第一计算引擎,通过所述第一计算引擎将所述第一日志数据输入所述第一日志分类模型进行分类预测,获得所述第一日志分类结果;
所述将所述第二日志数据输入第二日志分类模型进行分类预测,获得所述第二日志数据对应的第二日志分类结果,包括:
调用第二计算引擎,通过所述第二计算引擎将所述第二日志数据输入所述第二日志分类模型进行分类预测,获得所述第二日志分类结果。
5.根据权利要求4所述的日志异常检测方法,其特征在于,所述将所述第一日志数据输入所述第一日志分类模型进行分类预测之前,还包括:
将所述第一日志数据输入向量化模型进行向量化,获得所述第一日志数据对应的第一词向量;
所述将所述第一日志数据输入所述第一日志分类模型进行分类预测,包括:
将所述第一词向量输入所述第一日志分类模型进行分类预测。
6.根据权利要求1所述的日志异常检测方法,其特征在于,所述确定所述目标日志数据中是否存在异常日志数据之后,所述方法还包括:
若确定所述目标日志数据存在异常日志数据,则将所述异常日志数据发送至搜索服务引擎,以使所述搜索服务引擎将所述异常日志数据同步至预警服务器,所述预警服务器用于显示所述异常日志数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110595200.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:信息的推送方法及装置、存储介质、电子装置
- 下一篇:滚筒电机及输送设备