[发明专利]一种基于政府数据的质量检测方法

权利要求书

1.一种基于政府数据的质量检测方法，其特征在于：在数据库中对质量检测规则进行定义，创建规则模型和分布式质量检测任务，完成质量检测任务后统计质量检测结果，向问题责任人和监督人同时发送提醒通知，对检测数据进行评分，并生产质量检测报告。

2.根据权利要求1所述的基于政府数据的质量检测方法，其特征在于：采用Druid数据库连接池实现，监控Druid数据库连接池连池和SQL执行情况，每次调用的连接和释放，保证合理的资源利用；同时，建立一个大的数据库SQL生成工厂，在质量检测任务执行时根据数据源的类型选择对应工厂，保证在不同的数据库下正常的执行。

3.根据权利要求2所述的基于政府数据的质量检测方法，其特征在于：为避免重复监测，在数据监测时设定时间指针偏移和最大量监测，以便快速完成一次质量检测任务。

4.根据权利要求1或3所述的基于政府数据的质量检测方法，其特征在于：所述质量检测规则包括数据元规则和通用规则，所述数据元规则需要相应的政府平台数据标准服务的支持；所述通用规则定义SQL类型和正则表达式的类型，通过SQL类型实现对多种数据源的支持，对多个数据源的规则进行配置和统一管理；在质量检测时选择相应类型的质量检测规则来处理，进而动态的实现了数据源的配置，为以后的扩展提供支持。

5.根据权利要求1或3所述的基于政府数据的质量检测方法，其特征在于：所述质量检测任务采用轻量级分布式任务管理方案，以实现多任务的负载均衡；所述质量检测任务分配到执行器后，由调度中心触发执行器执行质量检测任务；所述调度中心基于集群Quartz实现并支持集群部署，所述执行器支持集群部署；当有新的执行器上线或者下线时，重新分配任务；所述轻量级分布式任务管理方案可以降低单台服务器硬件需求和服务器的压力，同时可以避免某个服务器出现问题影响数据质量的检测。

6.根据权利要求5所述的基于政府数据的质量检测方法，其特征在于：所述质量检测任务分别按照各自配置的路由方式分发到各个执行器；所述执行器集群部署，周期性的自动注册到调度中心，调度中心自动发现注册的质量检测任务并触发执行。

7.根据权利要求6所述的基于政府数据的质量检测方法，其特征在于：所述调度中心支持手动录入执行器地址。

8.根据权利要求6所述的基于政府数据的质量检测方法，其特征在于：所述路由方式包含选择第一个，最后一个，轮询或故障转移，每个质量检测任务配置一种路由方式。