[发明专利]用于对日志进行分类的方法及装置有效
申请号: | 201711221939.0 | 申请日: | 2017-11-29 |
公开(公告)号: | CN109947933B | 公开(公告)日: | 2023-07-04 |
发明(设计)人: | 孙廷韬 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/31;G06F16/18 |
代理公司: | 北京清源汇知识产权代理事务所(特殊普通合伙) 11644 | 代理人: | 冯德魁;张艳梅 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 日志 进行 分类 方法 装置 | ||
1.一种用于对日志进行分类的方法,其特征在于,包括:
获取日志;
将所述日志对应的日志模式归入日志模式集合中;
确定所述日志模式集合中日志模式数量超过设定阈值时,对日志模式集合中日志模式根据相似度进行分类,形成更新的日志模式集合;
其中,所述日志模式集合中日志模式数量,指当前所述日志模式集合中的日志模式数量与上次分类后形成的更新的日志模式集合中的日志模式数量之差;
所述设定阈值,指对所述日志模式集合中的日志模式触发一次日志分类时的日志模式的最小数量;
所述日志模式集合中日志模式,包括上次分完类形成的更新的日志模式集合中的日志模式和本次新归入的日志模式。
2.根据权利要求1所述的用于对日志进行分类的方法,其特征在于,所述获取日志包括:
逐一获取日志;或者
连续获取设定数目的日志。
3.根据权利要求1所述的用于对日志进行分类的方法,其特征在于,所述将所述日志对应的日志模式归入日志模式集合中包括:
获取所述日志的日志模式;
将所述日志对应的日志模式放入日志模式集合中。
4.根据权利要求1所述的用于对日志进行分类的方法,其特征在于,所述将所述日志对应的日志模式归入日志模式集合中,包括:
判断所述日志是否匹配日志模式集合中的满足归约条件的已有日志模式;
若匹配,将所述日志归约到匹配成功的已有日志模式中;
若不匹配,将所述日志对应的日志模式放入日志模式集合中。
5.根据权利要求4所述的用于对日志进行分类的方法,其特征在于,所述满足归约条件的已有日志模式,包括:
所述已有日志模式包含的词的数量满足预设词数量;以及
所述已有日志模式对应的日志条数超过预设日志条数。
6.根据权利要求4所述的用于对日志进行分类的方法,其特征在于,所述判断所述日志是否匹配日志模式集合中的满足归约条件的已有日志模式,包括:
对日志模式集合中的已有日志模式按照日志模式包含词的数量进行排序;
将所述日志依次与排好序的日志模式进行匹配,若匹配成功,则判断为所述日志匹配日志模式集合中的满足归约条件的已有日志模式。
7.根据权利要求6所述的用于对日志进行分类的方法,其特征在于,所述对日志模式集合中的已有日志模式按照日志模式包含词的数量进行排序,包括:
对日志模式集合中的已有日志模式按照日志模式包含词的数量进行由多到少进行排序;
或者
对日志模式集合中的已有日志模式按照日志模式包含词的数量进行由少到多进行排序。
8.根据权利要求4所述的用于对日志进行分类的方法,其特征在于,所述判断所述日志是否匹配日志模式集合中的满足归约条件的已有日志模式,包括:
将日志模式与日志模式集合中已有日志模式逐一进行匹配;若存在匹配成功日志模式,则判断为日志的日志模式是否匹配日志模式集合中的满足归约条件的已有日志模式。
9.根据权利要求6或8任一所述的用于对日志进行分类的方法,其特征在于,判断匹配是否成功,包括:
将日志模式中的词与所述日志的词进行顺序匹配查询,如果日志模式所有的词都能按顺序在所述日志中查询成功,则判断为匹配成功。
10.根据权利要求1所述的用于对日志进行分类的方法,其特征在于,所述对日志模式集合中日志根据相似度进行分类,形成更新的日志模式集合,包括:
根据日志模式集合中的日志模式相似度是否大于或等于预设相似度阈值对日志模式进行分类;
针对每个分出的类,执行如下操作:
从该类所有的日志模式中提取出相同的部分作为所述类的日志模式;
将所述类的日志模式存入日志模式集合中,形成更新的日志模式集合。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711221939.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种推送信息分类方法及系统
- 下一篇:针对短文本的数据挖掘方法及系统