[发明专利]一种异常数据识别分类方法、系统及存储介质在审
申请号: | 202111013342.3 | 申请日: | 2021-08-31 |
公开(公告)号: | CN113722485A | 公开(公告)日: | 2021-11-30 |
发明(设计)人: | 付骏宇 | 申请(专利权)人: | 苏州容思恒辉智能科技有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F40/289;G06K9/62 |
代理公司: | 佛山粤进知识产权代理事务所(普通合伙) 44463 | 代理人: | 耿鹏 |
地址: | 215011 江苏省苏州市高*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 异常 数据 识别 分类 方法 系统 存储 介质 | ||
1.一种异常数据识别分类方法,其特征在于,包括:
获取目标数据对应的数据流信息,根据所述数据流进行报文提取,通过所述报文生成异常数据特征;
将所述异常数据特征进行聚类,生成异常数据特征集合;
基于空间向量建立数据分类模型,将所述异常数据特征集合输入所述数据分类模型对待测数据进行异常检测;
通过所述数据分类模型将待测匹配到的所有异常数据作为待测数据的异常分类,并将异常分类输出。
2.根据权利要求1所述的一种异常数据识别分类方法,其特征在于,所述的获取目标数据对应的数据流信息,根据所述数据流进行报文提取,通过所述报文生成异常数据特征,具体为:
获取目标数据对应的数据流信息,生成目标数据流,检测所述目标数据流的会话状态;
通过所述会话状态生成报文,将所述报文中的文本数据进行异常标注,获取异常分类数据及正常分类数据,作为异常分类的样本集;
对所述报文通过分词系统进行分词,得到分词集合,并对所述分词集合进行清洗;
提取所述异常分类数据对应的分词结果的文本特征,通过所述文本特征生成异常数据特征。
3.根据权利要求2所述的一种异常数据识别分类方法,其特征在于,所述的提取所述异常分类数据的文本特征,通过所述文本特征生成异常数据特征,具体为:
通过分词出现的频率信息计算权重,根据权重计算各文本特征在异常分类数据中的重要性指数,并将所述文本特征进行任意组合计算对应的重要性指数;
预设循环检验次数及备选序列,并预设重要性指数阈值;
判断所述重要性指数是否大于所述重要性指数阈值;
若大于,则将该文本特征及该文本特征对应的任意组合进行丢弃;
将所述重要性指数进行排序,生成排序列表,按照预设数量选取所述排序列表中的重要性指数,将选取的重要性指数对应的文本特征及文本特征任意组合进行聚类归入所述备选序列,生成异常数据特征集合。
4.根据权利要求1所述的一种异常数据识别分类方法,其特征在于,所述的基于空间向量建立数据分类模型,将所述异常数据特征集合输入所述数据分类模型对待测数据进行异常检测,具体为:
获取待测数据的数据特征,用所述数据特征构建待测数据的向量空间;
将所述数据特征和异常数据特征在向量空间中进行维度统一,生成数据特征向量及异常数据特征向量;
计算数据特征向量及异常数据特征向量之间的距离,预设距离阈值;
判断数据特征向量及异常数据特征向量之间的距离是否小于预设距离阈值;
若小于,则将数据特征对应的待测数据归为异常数据,将匹配到的所有异常数据作为待测数据的异常分类,并将异常分类输出。
5.根据权利要求4所述的一种异常数据识别分类方法,其特征在于,所述的计算数据特征向量及异常数据特征向量之间的距离,具体为:
其中,s表示数据特征向量及异常数据特征向量的距离,p(cy,wt)表示异常数据特征对应的分词cy在待测数据对应的报文wt中出现的频率,i表示特征项数,t表示数据特征向量,y表示异常数据特征向量。
6.根据权利要求1所述的一种异常数据识别分类方法,其特征在于,还包括:
给定异常类别的数据信息,导入数据分类模型;
获取数据分类模型的分类结果,根据所述分类结果计算得出数据分类模型的分类精度;
将所述分类精度与数据信息的所属类别进行比较,生成偏差率;
判断所述偏差率是否大于预设偏差率;
若大于,则生成修正参数,通过所述修正参数对数据分类模型的分类精度进行补偿。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州容思恒辉智能科技有限公司,未经苏州容思恒辉智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111013342.3/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置