[发明专利]全业务指标的数据质量监控方法、电子设备及存储介质

说明书

本申请公开了一种全业务指标的数据质量监控方法、电子设备及计算机可读存储介质。该全业务指标的数据质量监控方法包括：获取业务指标；基于业务指标选取对应的监控规则；对对应的监控规则进行有效性校验；若校验成功，则利用监控规则的配置数据对业务指标进行校验。通过这种方式，能够实现提高数据中台的服务质量及数据质量监控的效率。

技术领域

本申请涉及数据处理领域，特别是涉及一种全业务指标的数据质量监控方法、电子设备及计算机可读存储介质。

背景技术

在数据加工链条长且复杂，数据处理痛点多样导致多类应用数据库并存的场景下，“只控上游”的传统解决方案已无法满足应用侧(尤其是报表)的数据质量要求。下游也需要对数据做结果性校验及利用特定的业务逻辑从结果上判断数据准确性。

出于对查询性能的要求，通常报表数据会从数仓导出到各类专用的数据源中提供查询。大数据处理场景下数据库的种类可能还会很多，导致无法简单地从各类库中抽取数据进行统一检查。

业务角度来讲，报表层的逻辑不一定适合直接用来做监控。例如，在直播行业中，主播粒度的数据波动可能会比较大，直接监控主播粒度的指标可能会由于经常性的波动而判断错误，这时就会需要监控聚合后的维度，比如品类，根据品类数据与上个周期的差异来捕捉异常。甚至有些小品类也可能波动大，需要剔除，或通过限定监控的维度来实现。

由上述等原因导致现有数据中台的数据质量较低，且现有数据监控效率较低。

发明内容

本申请主要解决的技术问题是如何提高数据中台的服务质量及数据质量监控的效率。

为解决上述技术问题，本申请采用的一个技术方案是：提供一种全业务指标的数据质量监控方法。该全业务指标的数据质量监控方法包括获取业务指标；基于业务指标选取对应的监控规则；对对应的监控规则进行有效性校验；若校验成功，则利用监控规则的配置数据对业务指标进行校验。

为解决上述技术问题，本申请采用的一个技术方案是：提供一种电子设备。该电子设备包括处理器及与处理器耦接的存储器，处理器执行存储器中的程序指令时用于实现上述全业务指标的数据质量监控方法。

为解决上述技术问题，本申请采用的一个技术方案是：提供一种计算机可读存储介质。该计算机可读存储介质上存储有程序指令，程序指令被执行时以实现上述全业务指标的数据质量监控方法。

本申请的有益效果是：区别于现有技术，本申请全业务指标的数据质量监控方法包括：获取业务指标；基于业务指标选取对应的监控规则；通过对应的监控规则进行有效性校验；若校验成功，则利用监控规则的配置数据对业务指标进行校验。通过这种方式，本申请为业务指标选取对应的监控规则，并对该监控规则的有效性进行校验，利用有效的监控规则对业务指标进行校验，能够对报表根据业务指标实际情况加上对应的监控规则，而不用关心不同数据源导致的数据采集等问题，每次产生数据后都利用监控规则对应用库的数据(业务指标)进行校验，能够保证一旦数据出现问题时能第一时间发现并处理，因此，能够提高数据中台的服务质量，且提高数据质量监控的效率。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。其中：

图1是本申请全业务指标的数据质量监控方法一实施例的结构示意图；

图2是图1实施例全业务指标的数据质量监控方法中步骤S13的具体流程示意图；

图3是图1实施例全业务指标的数据质量监控方法中步骤S13的具体流程示意图；

图4是图1实施例全业务指标的数据质量监控方法中步骤S13的具体流程示意图；