[发明专利]一种进行业务数据质量检核的方法和系统

说明书

本发明公开了一种进行业务数据质量检核的方法和系统，该方法为：定义业务数据标准，并定义所述业务数据标准对应的质量要求，以此获得相应的标准集合；依据业务数据标准对应的质量要求，定义数据质量检核方法和模型，以此获得相应的数据质量检核规则集合；获取待质量检核的业务源数据，并配置应用数据质量检核规则和检核方法，形成业务数据质量检核方案集合；对业务数据检核方案进行配置执行，以此获得业务数据质量问题数据列表。本发明的进行业务数据质量检核的方法和系统能够保证源数据中的每一项数据均能够获得有效和准确的质量检核，依照数据质量问题报告对业务数据进行数据治理，从而实现数据质量的全面提升和数据资产的价值提升。

技术领域

本发明涉及数据资产质量管理技术领域，具体来说，涉及一种进行业务数据质量检核的方法和系统。

背景技术

在信息管理与信息系统领域中，数据资产是重要的核心价值所在。随着信息技术的不断发展和信息系统间的深入融合和集成共享，数据资产的质量问题显得尤为重要。影响数据资产质量的主要因素包括数据的真实性、完整性、准确性、数据成本、安全性。

目前数据资产的质量检核存在以下问题：

（1）需求定制化

根据用户的数据质量需求，定制数据质量检核方案，进行需求的定制化平台开发，以达到对业务数据质量检核目的。这种方法存在着通用性和适应性方面的缺点，新增系统或者增加变更数据质量检核要求，都需要进行定制化开发工作，系统开发周期长，效率底下。

（2）数据质量检核规则缺少通用性

目前的数据质量检核规则都与待检核信息系统相关联，每一个系统中的数据都有着个性化的定义，针对每个系统制定独立的检核规则。这种方法存在着工作量大、实施周期长、扩展性差的缺点，每当有新的系统上线或原有系统更新，都需要进行质量检核规则的调整和开发，运维成本高，不易扩展。

发明内容

针对相关技术中的上述技术问题，本发明提出一种动态进行业务数据质量检核的方法和系统，能够克服现有技术的上述不足。

为实现上述技术目的，本发明的技术方案是这样实现的：

一种进行业务数据质量检核的方法，包括以下步骤：

S1 定义业务数据标准，并定义所述业务数据标准对应的质量要求，以此获得相应的标准集合；

S2 依据业务数据标准对应的质量要求，定义数据质量检核方法和模型，以此获得相应的数据质量检核规则集合；

S3 获取待质量检核的业务源数据，并配置应用数据质量检核规则和检核方法，形成业务数据质量检核方案集合；

S4 对业务数据检核方案进行配置执行，以此获得业务数据质量问题数据列表。

进一步地，所述步骤S1具体包括：

S101 对业务数据标准分类进行定义，获取业务数据标准的分类集合；

S102 根据步骤S101中定义的业务数据标准分类定义详细的业务数据标准，形成标准的唯一编号、标准中文名称、业务数据定义、业务规则等业务属性集合；

S103 依据定义的业务属性集合，定义数据标准的数据类型、值域、代码编码规则、数据格式、计量单位等技术属性集合；

S104 对定义的数据标准，进行数据查重处理校验，以此获得相应的数据标准集合。

进一步地，所述步骤S2具体包括：

S201 根据步骤S1所述业务数据标准中的业务数据定义、业务规则，从数据质量的规范性、完整性、唯一性、一致性方面，定义数据质量检核的规则方法标准库；

S202 根据所述业务数据标准中的技术属性中数据类型为代码值类的，定义元数据代码值域的数据质量规则方法标准库；

S203 依据数据质量检核的规则方法标准库和元数据代码值域的数据质量规则方法标准库，生成业务数据质量检核模型。