[发明专利]数据异常检测方法、装置、计算机设备及存储介质有效
申请号: | 201810813779.7 | 申请日: | 2018-07-23 |
公开(公告)号: | CN109032829B | 公开(公告)日: | 2020-12-08 |
发明(设计)人: | 刘彪;张戎;李剑锋;胡婧茹;汪华;任思宇;刘玉杰;肖世广;林向东 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F11/07 | 分类号: | G06F11/07 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 黄晶晶;李文渊 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 异常 检测 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及一种数据异常检测方法、装置、计算机设备及存储介质,该方法包括:获取时间序列;其中,所述时间序列中包括目标数据点和在所述目标数据点之前上报的历史数据点,所述目标数据点和所述历史数据点按照上报的时间先后顺序进行排列;通过初级判决方式对所述时间序列进行初级异常识别;当识别到所述时间序列疑似异常时,则对所述时间序列进行特征提取;将提取得到的特征数据输入异常检测模型,输出针对所述目标数据点的异常检测结果;所述异常检测模型通过有监督的机器学习算法进行训练得到。本申请的方案提高了异常检测的准确性。
技术领域
本发明涉及计算机技术领域,特别是涉及一种数据异常检测方法、装置、计算机设备及存储介质。
背景技术
随着科学技术的飞速发展,线上系统的使用越来越广泛。为了保证线上系统的正常运行,保证线上数据的准确性,异常检测显得尤其重要。
传统方法中,是采用设置阈值的方式进行异常检测的,即人为设定一个数值作为阈值,超过这个阈值就认为是异常。然而,实际情况中数据形态各异,这种单纯通过设置阈值的方式来判断数据是否异常,太过于绝对,导致异常检测的准确率比较低。
发明内容
基于此,有必要针对传统方法导致异常检测的准确率比较低的问题,提供一种数据异常检测方法、装置、计算机设备及存储介质。
一种数据异常检测方法,所述方法包括:
获取时间序列;其中,所述时间序列中包括目标数据点和在所述目标数据点之前上报的历史数据点,所述目标数据点和所述历史数据点按照上报的时间先后顺序进行排列;
通过初级判决方式对所述时间序列进行初级异常识别;
当识别到所述时间序列疑似异常时,则对所述时间序列进行特征提取;
将提取得到的特征数据输入异常检测模型,输出针对所述目标数据点的异常检测结果;所述异常检测模型通过有监督的机器学习算法进行训练得到。
一种数据异常检测装置,所述装置包括:
获取模块,用于获取时间序列;其中,所述时间序列中包括目标数据点和在所述目标数据点之前上报的历史数据点,所述目标数据点和所述历史数据点按照上报的时间先后顺序进行排列;
初级判决模块,用于通过初级判决方式对所述时间序列进行初级异常识别;
特征提取模块,用于当识别到所述时间序列疑似异常时,则对所述时间序列进行特征提取;
异常检测模块,用于将提取得到的特征数据输入异常检测模型,输出针对所述目标数据点的异常检测结果;所述异常检测模型通过有监督的机器学习算法进行训练得到。
一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行如下步骤:
获取时间序列;其中,所述时间序列中包括目标数据点和在所述目标数据点之前上报的历史数据点,所述目标数据点和所述历史数据点按照上报的时间先后顺序进行排列;
通过初级判决方式对所述时间序列进行初级异常识别;
当识别到所述时间序列疑似异常时,则对所述时间序列进行特征提取;
将提取得到的特征数据输入异常检测模型,输出针对所述目标数据点的异常检测结果;所述异常检测模型通过有监督的机器学习算法进行训练得到。
一种存储有计算机程序的存储介质,所述计算机程序被处理器执行时,使得处理器执行如下步骤:
获取时间序列;其中,所述时间序列中包括目标数据点和在所述目标数据点之前上报的历史数据点,所述目标数据点和所述历史数据点按照上报的时间先后顺序进行排列;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810813779.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置