[发明专利]大数据环境下实现数据加密同步优化处理的系统及其方法

说明书

本发明涉及一种大数据环境下实现数据加密同步优化处理的系统，包括初始化模块，用于创建数据库中涉及的表和插入数据；字段及算法模板设计模块，与所述的初始化模块相连接，用于配置加密算法和字段信息；加密任务配置模块，用于将加密作业任务配置加密模板，绑定加密的业务数据涉及到的字段和具体算法；加密数据同步模块，用于开启加密任务并同步数据。本发明还涉及一种实现大数据环境下的数据加密同步优化处理方法。采用了本发明的大数据环境下实现数据加密同步优化处理的系统及其方法，通过设计不同字段和不同算法的模板，然后加密模板配置加密字段和加密字段所需要的加密算法，将具体的加密算法绑定到需要加密或者脱敏的字段上达到数据加密同步优化的目的。

技术领域

本发明涉及数据优化领域，尤其涉及数据资产管理领域，具体是指一种大数据环境下实现数据加密同步优化处理的系统及其方法。

背景技术

数据服务共享平台定位于企业数据资源“纵向贯通”、“横向互联”的共享通道，使其成为企业、组织、部门的数据工厂，主要从安全管控、服务治理、服务消费、服务开发效率等系列问题入手，提供统一平台对多源、多类型数据进行统一的服务化管控，帮助企业更加有效、可靠的使用数据。

数据共享平台是处理数据交换的一种重要方式，是将数据规划整理后提供出去的一种管理方式，包括整个数据的流程和走向，通过有效的管理实现数据价值。其中，数据源和目标库数据加密同步数据是数据平台同步数据的一个重要方面，在系统的使用过程中，不同维度的加密方式直接影响数据共享平台的数据提取效率、可否满足业务场景、用户体验度等方面，一定程度影响着数据资产管理的效率。

目前，在数据平台的使用中，支持数据同步加密的使用，即数据源的数据库数据根据同步作业的配置信息，然后通过在线作业的任务实现的，将其中的加密数据同步到目标数据库中，具体的实现步骤如下：

1.初始化环境，配置数据库，初始化数据库；

2.配置数据源、目标库信息资源；

3.配置数据加密信息、同步任务；

4.根据同步加密数据的要求配置日历、频度等定时信息；

5.执行数据加密同步任务。

根据如上步骤在数据平台中的数据加密同步任务中，只满足常规的数据加密同步要求，但是在实际项目使用中，数据加密同步的管理更加细化，整体数据字段加密和加密算法单一不能满足当前同步存储数据的要求，使用当前的数据同步的方法显然不能完全满足使用数据的需求，使得数据平台的用户体验度下降。

现有的数据平台中可以选择当前的数据加密同步的办法，通过配置作业实现数据库的加密同步功能是通过配置数据源与目标库的作业信息，然后通过增加某一张表的加密属性和选择需要加密的算法实现的，但是实际项目使用中，数据加密同步的管理更加精细，整体加密或者算法单一不能满足当前要求，此时没能够达到分字段、多算法加密同步数据的目的，使用当前的数据加密同步的方法显然不能完全满足当前的需求，使得数据共享平台的用户体验度下降。

发明内容

本发明的目的是克服了上述现有技术的缺点，提供了一种满足效率高、准确度高、适用范围较为广泛的大数据环境下实现数据加密同步优化处理的系统及其方法。

为了实现上述目的，本发明的大数据环境下实现数据加密同步优化处理的系统及其方法如下：

该大数据环境下实现数据加密同步优化处理的系统，其主要特点是，所述的系统包括：

初始化模块，用于创建数据库中涉及的表和插入数据；

字段及算法模板设计模块，与所述的初始化模块相连接，用于配置加密算法和字段信息；

加密任务配置模块，与所述的字段及算法模板设计模块相连接，用于将加密作业任务配置加密模板，绑定加密的业务数据涉及到的字段和具体算法；