[发明专利]一种数据检测方法和装置有效
申请号: | 201611182307.3 | 申请日: | 2016-12-19 |
公开(公告)号: | CN108205570B | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 李婧萱;谭卫国 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/21;G06K9/62 |
代理公司: | 北京中博世达专利商标代理有限公司 11274 | 代理人: | 申健 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 检测 方法 装置 | ||
1.一种业务数据检测方法,其特征在于,包括:
服务器从业务系统抽取多个业务数据,将所述多个业务数据聚类为簇,获取各簇的关键特征和度量标准;
对于所述各簇中的每个簇,所述服务器根据该簇的关键特征和度量标准获取所述多个业务数据属于该簇的概率;
对于具有相同关键特征的多个簇,当所述服务器根据所述多个业务数据分别属于所述多个簇中每个簇的概率识别出所述多个簇下存在错误业务数据时,所述服务器从所述多个簇的关键特征进一步确定所述错误业务数据对应的特征组合;
所述服务器根据所述多个业务数据分别属于所述多个簇中每个簇的概率识别出所述多个簇下存在的错误业务数据包括:
若所述多个业务数据中的任一业务数据属于所述多个簇中每个簇的概率相差均在预设范围内,则所述服务器确定所述任一业务数据为所述多个簇下的错误业务数据;
所述服务器从所述多个簇的关键特征进一步确定所述错误业务数据对应的特征组合包括:
所述服务器将所述多个簇的关键特征确定为所述错误业务数据的异常子空间;
所述服务器从所述异常子空间进行搜索并动态建立伪树结构,以确定所述异常子空间中长度最小的异常特征组合为所述错误业务数据对应的特征组合。
2.根据权利要求1所述的方法,其特征在于,所述获取各簇的关键特征和度量标准,对于所述各簇中的每个簇,所述服务器根据该簇的关键特征和度量标准获取所述多个业务数据属于该簇的概率包括:
对于所述各簇中的每个簇,所述服务器根据该簇的全局特征、该簇的第一聚类中心与第一度量标准获取所述多个业务数据属于该簇的第一概率;
所述服务器根据所述第一概率和所述多个业务数据获取该簇的第二聚类中心,并通过降维算法与所述多个业务数据属于该簇的第一概率对该簇的全局特征进行压缩,获取所述第二聚类中心下该簇的第一关键特征,并根据所述多个业务数据属于所述该簇的第一概率、该簇的第一聚类中心和所述多个业务数据获取第二度量标准;
所述服务器确定所述多个业务数据属于该簇的第一概率和所述第二度量标准是否收敛;
若所述多个业务数据属于该簇的第一概率和所述第二度量标准收敛,则所述服务器确定该簇的第一关键特征为该簇的关键特征,所述第二度量标准为该簇的度量标准,所述多个业务数据属于该簇的第一概率为所述多个业务数据属于该簇的概率;
若所述多个业务数据属于该簇的第一概率和所述第二度量标准不收敛,则所述服务器根据该簇的第二聚类中心、该簇的第一关键特征以及所述第二度量标准获取所述多个业务数据属于该簇的第二概率,并根据所述第二概率、所述第二聚类中心和所述多个业务数据获取第三度量标准,以便所述服务器确定所述多个业务数据属于该簇的第二概率和所述第三度量标准是否收敛,直至将收敛时的概率确定为所述多个业务数据属于该簇的概率,并将收敛时的关键特征确定为所属各簇的关键特征。
3.根据权利要求2所述的方法,其特征在于,所述服务器根据该簇的全局特征、该簇的第一聚类中心与第一度量标准获取所述多个业务数据属于该簇的第一概率包括:
所述服务器根据该簇的全局特征和该簇的第一聚类中心获取所述多个业务数据到该簇的初始距离;
所述服务器根据所述初始距离和所述第一度量标准获取所述多个业务数据到该簇的第一聚类中心的投影距离;
所述服务器根据所述多个业务数据到该簇的第一聚类中心的投影距离获取所述多个业务数据属于该簇的第一概率。
4.根据权利要求1所述的方法,其特征在于,所述服务器从所述异常子空间进行搜索并动态建立伪树结构,以确定所述异常子空间中长度最小的异常特征组合为所述错误业务数据对应的特征组合包括:
所述服务器在对所述伪树结构进行搜索时,若所述服务器确定任一节点异常,则继续确定所述任一节点的子节点是否异常;若所述服务器确定所述任一节点正常,则所述服务器继续确定所述任一节点的兄弟节点是否异常;当所述任一节点异常且其子节点均正常时,则所述服务器确定所述任一节点的特征组合为所述异常子空间中长度最小的异常特征组合,即为所述错误业务数据对应的特征组合。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611182307.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于更新配置管理数据库的方法和装置
- 下一篇:键值数据表的连接方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置