[发明专利]基于序列预测的日志异常检测方法及装置有效
| 申请号: | 202110534643.4 | 申请日: | 2021-05-17 |
| 公开(公告)号: | CN113434357B | 公开(公告)日: | 2023-04-11 |
| 发明(设计)人: | 周江;宿林;李波;王伟平 | 申请(专利权)人: | 中国科学院信息工程研究所 |
| 主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F16/18;G06F40/216 |
| 代理公司: | 北京君尚知识产权代理有限公司 11200 | 代理人: | 陈美章 |
| 地址: | 100093 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 序列 预测 日志 异常 检测 方法 装置 | ||
1.一种基于序列预测的日志异常检测方法,其步骤包括:
1)解析待检测日志序列,得到待检测日志键序列;
2)将待检测日志键序列输入日志异常检测模型,获取日志异常检测结果;
其中,通过以下步骤得到日志异常检测模型:
a)解析若干正常日志数据序列,得到若干正常日志键序列;其中,所述解析若干正常日志数据序列,得到若干正常日志键序列,包括:
设定的前文长度m与后文长度n,其中m≥0,n≥0,m+n=P,P为第一滑动窗口的长度;
利用设定的前文长度m与后文长度n对各正常日志键序列进行切分,得到每一正常日志键序列的若干训练样本;
b)对每一正常日志键序列使用第一滑动窗口,得到每一正常日志键序列的若干训练样本;
c)基于预处理语言模型,获取每一正常日志键序列中所有单词的词向量,并根据词向量及各单词在相应训练样本出现的频率,获取各正常日志键序列的向量序列;
d)对每一向量序列使用第二滑动窗口并掩盖第二滑动窗口中一个待预测位置,通过第二滑动窗口内各元素位置,得到若干位置编码向量;
e)编码各位置编码向量,根据编码结果获取相应待预测位置的预测值,并根据预测值与真实值的差值进行误差回传及参数更新,得到日志异常检测模型。
2.如权利要求1所述的方法,其特征在于,得到待检测日志键序列的方法包括:Drain方法。
3.如权利要求1所述的方法,其特征在于,预处理语言模型包括:word2vec模型。
4.如权利要求1所述的方法,其特征在于,通过以下步骤获取各正常日志键序列的向量序列:
1)根据词向量及各单词在相应训练样本出现的频率,得到每个日志键的句向量表示;
2)结合正常日志键序列中日志键的顺序,得到各正常日志键序列的向量序列。
5.如权利要求1所述的方法,其特征在于,掩盖待预测位置的方法包括:掩膜机制。
6.如权利要求1所述的方法,其特征在于,通过以下策略得到位置编码向量:
1)当句向量表示的维度为偶数时,编码结果其中pos为向量序列中元素的位置,i为日志键对应向量的维度序号,dmodel表示句向量表示的维数;
2)当该位置日志键的维度为奇数时,编码结果
7.如权利要求1所述的方法,其特征在于,在编码各位置编码向量时,利用注意力机制学习各位置编码结果之间的依赖关系。
8.一种存储介质,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行权利要求1-7中任一所述方法。
9.一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行如权利要求1-7中任一所述方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院信息工程研究所,未经中国科学院信息工程研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110534643.4/1.html,转载请声明来源钻瓜专利网。





