[发明专利]基于元数据的数据质量校验系统

权利要求书

1.一种基于元数据的数据质量校验系统，其特征在于，包括元数据管理子系统、数据质量评估子系统以及数据质量展示子系统，其中：

元数据管理子系统根据质量校验分类定义元数据模型，配置好数据源后，元数据管理子系统把数据源的数据库、表、字段信息存储到元数据库中，再基于采集到的数据库、表、字段信息和元数据模型，生成具体的不同规范类型的数据质量考核指标，其中：

元数据模型通过类Class来描述，由基本信息类baseInfo、约束性类constraint、评估配置类evaluation构成，在基本信息类baseInfo中定义元数据的基本信息，在约束性类constraint中实现对基础标准规范性的定义以及面向数据集的约束性的定义，在评估配置类evaluation中配置评估参数；

数据质量考核指标分为约束性、关联性、规范性、及时性和稳定性；

数据质量评估子系统基于元数据管理子系统生成的数据质量考核指标，从所有数据质量考核指标中选择一个或多个元数据指标生成数据质量评估模型，再对数据质量评估模型进行分析计算，得到数据质量控制指标考核结果，其中：

数据质量评估模型是需求，选择一个或多个元数据映射生成的元数据指标来生成一套数据质量评分标准；

数据质量评估子系统对于属于关联性的元数据指标的考核方法是计算该元数据指标的关联率，关联率＝M/N，某机构上传至数据质量校验系统的表T1包含N条表数据，其中有M条表数据能够关联上同一机构上传的表T2；

数据质量评估子系统对于属于约束性的元数据指标的考核方法是计算该元数据指标的约束符合率＝M/N，某机构上传至数据质量校验系统的表T1包含N条表数据，其中有M条表数据能够找到同一机构上传的表T2记录；

数据质量评估子系统对于属于一致性的元数据指标的考核方法是计算该元数据指标的明细数据统计结果与业务运营一致率＝(TOTAL1-TOTAL2)/TOTAL1，某机构通过表T1向数据质量校验系统上报数据量是TOTAL1，同一机构通过表T2向数据质量校验系统上报数据量是TOTAL2；

数据质量评估子系统对于属于规范性的元数据指标的考核方法是计算该元数据指标的规范率＝M/N，某机构上传至数据质量校验系统的表T1包含N条表数据，其中目标字段填报规范的记录条数为M条；

数据质量评估子系统对于属于及时性的元数据指标的考核方法是计算该元数据指标的平均差异天数＝M/N，某机构上传至数据质量校验系统的表T1包含N条表数据，该机构最后一次上传时间与业务时间的差距之和为M天；

数据质量评估子系统对于属于稳定性的元数据指标的考核方法是计算非断传天数的比例＝(N-M)÷N，某机构上传至数据质量校验系统的天数N天，断传天数为M天；

数据质量展示子系统，用于展示数据质量控制指标考核结果。