[发明专利]数据监控方法及平台有效
申请号: | 201811511995.2 | 申请日: | 2018-12-11 |
公开(公告)号: | CN109714196B | 公开(公告)日: | 2021-12-14 |
发明(设计)人: | 胡森一;孙志海 | 申请(专利权)人: | 中国联合网络通信集团有限公司;联通大数据有限公司 |
主分类号: | H04L12/24 | 分类号: | H04L12/24;H04L12/26 |
代理公司: | 北京天昊联合知识产权代理有限公司 11112 | 代理人: | 彭瑞欣;汪源 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 监控 方法 平台 | ||
本公开涉及数据处理技术领域,提供了一种数据监控方法,包括:采集与业务数据对应的信令数据;对信令数据进行解析以得出业务数据的数据文件大小指标、数据文件记录数指标和LAC_CI记录数指标;分别生成数据文件大小指标、数据文件记录数指标和LAC_CI记录数指标与历史正常指标间的差异值;基于差异值生成数据质量指标;当判断出数据质量指标小于预设阈值时,发出业务数据异常告警信号。相应地,本公开还提供了一种数据监控平台。
技术领域
本公开涉及数据处理技术领域,特别涉及数据监控方法及平台。
背景技术
在运营商的业务发展过程中,其所积累的数据量和数据种类会越来越多,且各个数据采集源头多需实时采集和处理数据。由于数据量过大且处理流程复杂,如何对数据采集和处理过程进行实时监控,以便及时掌握数据质量并在监控出异常时发出预警成为亟需解决的问题。
应该注意,上面对技术背景的介绍只是为了方便对本公开的技术方案进行清楚、完整的说明,并方便本领域技术人员的理解而阐述的。不能仅仅因为这些方案在本公开的背景技术部分进行了阐述而认为上述技术方案为本领域技术人员所公知。
发明内容
本公开旨在至少解决现有技术中存在的技术问题之一,提出了数据监控方法及平台。
第一方面,本公开实施例提供了一种数据监控方法,包括:
采集与业务数据对应的信令数据;
对所述信令数据进行解析以得出所述业务数据的数据文件大小指标、数据文件记录数指标和LAC_CI记录数指标;
分别生成所述数据文件大小指标、数据文件记录数指标和LAC_CI记录数指标与历史正常指标间的差异值;
基于所述差异值生成数据质量指标;
当判断出所述数据质量指标小于预设阈值时,发出业务数据异常告警信号。
在一些实施例中,分别生成数据文件大小指标、数据文件记录数指标和LAC_CI记录数指标与历史正常指标间的差异值的步骤具体包括:
根据数据文件大小指标和历史正常数据文件大小指标生成数据文件大小差异值、及根据数据文件记录数指标和历史正常数据文件记录数指标生成数据文件记录数差异值、及根据LAC_CI记录数指标和历史正常LAC_CI记录数指标生成LAC_CI记录数差异值。
在一些实施例中,通过公式生成数据文件大小差异值,其中,Δs表示数据文件大小差异值,s表示数据文件大小指标,表示历史正常数据文件大小指标;
通过公式生成数据文件记录数差异值,其中,Δr表示数据文件记录数差异值,r表示数据文件记录数指标,表示历史正常数据文件记录数指标;
通过公式生成LAC_CI记录数差异值,其中,Δk表示LAC_CI记录数差异值,k表示LAC_CI记录数指标,表示历史正常LAC_CI记录数指标。
在一些实施例中,基于差异值生成数据质量指标的步骤具体包括:
根据所述数据文件大小差异值和数据文件记录数差异值生成数据量指标;
根据LAC_CI记录数差异值生成数据准确性指标;
对所述数据量指标和数据准确性指标分别加权后求和以生成与所述业务数据对应的数据质量指标;当所述业务数据为该业务所包括的多种业务数据中的一种时,所述数据量指标的加权系数包括所述数据量指标的权重值及所述业务数据对应的预设业务权重值,所述数据准确性指标的加权系数包括所述数据准确性指标的权重值及所述业务数据对应的预设业务权重值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国联合网络通信集团有限公司;联通大数据有限公司,未经中国联合网络通信集团有限公司;联通大数据有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811511995.2/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置