[发明专利]一种数据故障分析的方法及装置有效
申请号: | 202110338027.1 | 申请日: | 2021-03-30 |
公开(公告)号: | CN112965882B | 公开(公告)日: | 2022-05-10 |
发明(设计)人: | 潘振东 | 申请(专利权)人: | 北京三快在线科技有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F9/48;G06F9/455 |
代理公司: | 北京曼威知识产权代理有限公司 11709 | 代理人: | 方志炜 |
地址: | 100080 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 故障 分析 方法 装置 | ||
本说明书公开了一种数据故障分析的方法及装置,服务器可以获取待检测任务,根据待检测任务所对应的任务链路,对待检测任务进行拆分,得到待检测任务所对应的各基础任务事件。而后,对该基础任务事件进行异常检测,若确定该基础任务事件为异常事件,并通过预设的任务控制系统,获取至少一个任务节点对应的节点状态参数,以及将该异常事件与节点状态参数对应存储在预设的存储空间中,最后,若监测到完成每个基础任务事件的异常检测,从存储空间中提取各异常事件以及各异常事件对应的节点状态参数,对待检测任务进行数据故障分析,本方法无需对业务链路进行埋点操作,能够极大的降低了监测业务链路的成本,从而提高了数据故障分析的效率。
技术领域
本说明书涉及计算机技术领域,尤其涉及一种数据故障分析的方法及装置。
背景技术
为保障线上业务的顺利执行,业务人员通常需要对整个业务的业务链路进行监测,以保证业务执行过程中出现故障时,业务人员能够及时对出现的数据故障进行分析,并恢复业务的正常执行。
目前,业务人员通常需要预先在业务链路中进行埋点操作,以对业务链路中出现的情况进行及时监测,但是,这种方式不仅需要业务人员手动执行,还可能需要业务人员对原有的业务代码进行修改,因此,极大的提高了监测业务链路的成本,从而降低了数据故障分析的效率。
所以,如何能够有效地降低数据故障分析所消耗的人力成本,提高数据故障分析的效率,则是一个亟待解决的问题。
发明内容
本说明书提供一种数据故障分析的方法及装置,以部分地解决现有技术存在的上述问题。
本说明书采用下述技术方案:
本说明书提供了一种数据故障分析的方法,包括:
获取待检测任务;
根据所述待检测任务所对应的任务链路,对所述待检测任务进行拆分,得到所述待检测任务所对应的各基础任务事件;
针对每个基础任务事件,对该基础任务事件进行异常检测,判断该基础任务事件是否为异常事件;
若确定该基础任务事件出现异常,确定该基础任务事件为异常事件,并通过预设的任务控制系统,确定该异常事件在所述任务控制系统中所涉及的至少一个任务节点,获取所述至少一个任务节点对应的节点状态参数,以及将该异常事件与所述节点状态参数对应存储在预设的存储空间中;
若监测到完成每个基础任务事件的异常检测,从所述存储空间中提取各异常事件以及各异常事件对应的节点状态参数;
根据所述各异常事件对应的节点状态参数,对所述待检测任务进行数据故障分析。
可选地,所述任务控制系统中包含有若干任务节点,每个任务节点中包含有至少一个任务容器,一个任务节点中包含的至少一个任务容器由调度至该任务节点的任务进程进行管理;
获取所述至少一个任务节点对应的节点状态参数,具体包括:
获取调度至所述至少一个任务节点的任务进程对应的进程状态数据,所述进程状态数据用于表征所述任务进程的运行状况,以及所述至少一个任务节点中包含的任务容器的运行状况;
根据所述进程状态数据,确定所述至少一个任务节点对应的节点状态参数。可选地,针对每个基础任务事件,对该基础任务事件进行异常检测,判断该基础任务事件是否为异常事件之前,所述方法还包括:
按照预设的筛选条件,从所述各基础任务事件中选取待检测基础任务事件;
针对每个待检测基础任务事件,将该待检测基础任务事件按照预设的数据格式,得到格式转换后的任务事件,并所述格式转换后的任务事件存储在预设的缓存中,所述预设的缓存包括:最近最少使用LRU缓存;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司,未经北京三快在线科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110338027.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置