[发明专利]用于识别异常的网络设备日志的方法和装置在审
申请号: | 202110195880.2 | 申请日: | 2021-02-22 |
公开(公告)号: | CN112948341A | 公开(公告)日: | 2021-06-11 |
发明(设计)人: | 张静 | 申请(专利权)人: | 京东数字科技控股股份有限公司 |
主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F16/31;G06F16/332;G06F16/35;H04L12/24 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100176 北京市大兴区经济*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 识别 异常 网络设备 日志 方法 装置 | ||
本公开的实施例公开了用于识别异常的网络设备日志的方法和装置。该方法的一具体实施方式包括:获取待识别的网络设备日志集合;利用预设的至少一类网络设备日志模板进行匹配,生成预设时间段内分别与各类网络设备日志模板匹配的网络设备日志的数目;根据该数目与对应的历史日志数目分布之间的匹配,生成用于指示是否存在异常网络设备日志的提示信息,其中,该历史日志数目分布基于前一预设时间段内的网络设备日志集合与该预设的至少一类网络设备日志模板的匹配生成。该实施方式提升了异常的网络设备日志的识别效率和识别准确性。
技术领域
本公开的实施例涉及计算机技术领域,具体涉及用于识别异常的网络设备日志的方法和装置。
背景技术
网络设备日志可以用于记录用户操作、系统运行状态等,是一个系统的重要组成部分。随着网络系统规模的增长,日志的规模也越来越大,如何对大规模日志进行分析、识别异常的网络设备日志成为需要解决的问题。
现有技术中,通常是在网络故障发生后,利用规则、经验的手段对关联的网络设备日志逐一排查,导致人工成本高,并且排查问题被动。而且,由于网络设备日志的规模日益增加,逐一排查的方式难以实现,导致排查故障的周期长,故障不易发现等问题。
发明内容
本公开的实施例提出了用于识别异常的网络设备日志的方法和装置。
第一方面,本公开的实施例提供了一种用于识别异常的网络设备日志的方法,该方法包括:获取待识别的网络设备日志集合;利用预设的至少一类网络设备日志模板进行匹配,生成预设时间段内分别与各类网络设备日志模板匹配的网络设备日志的数目;根据数目与对应的历史日志数目分布之间的匹配,生成用于指示是否存在异常网络设备日志的提示信息,其中,历史日志数目分布基于前一预设时间段内的网络设备日志集合与预设的至少一类网络设备日志模板的匹配生成。
在一些实施例中,该方法还包括:确定待识别的网络设备日志集合中是否存在与预设的至少一类网络设备日志模板均未匹配的网络设备日志;响应于确定存在,将未匹配的网络设备日志进行聚类;根据聚类的结果,向对应的目标设备发送提示信息。
在一些实施例中,上述根据数目与对应的历史日志数目分布之间的匹配,生成用于指示是否存在异常网络设备日志的提示信息,包括:确定数目与对应的历史日志数目的分布是否一致;响应于确定数目与对应的历史日志数目的分布不一致,生成用于指示存在异常网络设备日志的提示信息。
在一些实施例中,上述确定数目与对应的历史日志数目的分布是否一致,包括:响应于确定预设时间段内匹配的网络设备日志的数目与历史日志数目分布所指示的对应于同一类网络设备日志模板的数目的差值大于预设阈值,确定数目与对应的历史日志数目的分布不一致。
在一些实施例中,上述确定数目与对应的历史日志数目的分布是否一致,包括:根据数目和历史日志数目分布的序列,生成预设的至少一类网络设备日志模板中每一类网络设备日志模板在此前多个预设时间段中匹配的网络设备日志的数目的时序特征;基于时序特征是否指示存在异常数据,确定数目与对应的历史日志数目的分布是否一致。
在一些实施例中,上述预设的至少一类网络设备日志模板包括树结构,其中,树结构的节点包括对网络设备日志切词后所得到的词,树结构的节点形成的路径与按照词频降序排列的词序列一致;以及上述利用预设的至少一类网络设备日志模板进行匹配,生成预设时间段内分别与各类网络设备日志模板匹配的网络设备日志的数目,包括:对待识别的网络设备日志集合中的网络设备日志进行切词;确定切词得到的词集合的词频;将待识别的网络设备日志集合中的网络设备日志切词后得到的词按照所确定的词频的降序排列;将待识别的网络设备日志集合中的网络设备日志对应的按照所确定的词频的降序排列的词序列与预设的至少一类网络设备日志模板进行匹配,统计预设时间段内分别与各类网络设备日志模板匹配的网络设备日志的数目。
在一些实施例中,该方法还包括:利用待识别的网络设备日志,更新预设的至少一类网络设备日志模板。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东数字科技控股股份有限公司,未经京东数字科技控股股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110195880.2/2.html,转载请声明来源钻瓜专利网。