[发明专利]一种海量数据质量检核方法及其系统

摘要

本申请公开了一种海量数据质量检核方法及其系统，其中，海量数据质量检核系统包括：电力数据中台、容器云和服务器集群；服务器集群包括多个服务器；电力数据中台用于存储待检核的海量数据并允许服务器集群进行访问；容器云用于从服务器集群中选择执行服务器；服务器集群用于对基础信息进行独立部署，确定数据检核信息并上传；根据数据检核信息对海量数据进行访问，确定待检核的海量数据的数据切块和数据检核任务的并行数量；根据并行数量确定需要调度的执行服务器；由执行服务器对数据切块进行处理，生成检核结果；对检核结果进行存储。本申请具有支持调度无限制的数据质量检核任务的执行、支持海量数据的数据质量检核结果分析和检索的技术效果。