[发明专利]一种大数据集成系统

权利要求书

1.一种大数据集成系统，其特征在于：包括

数据存储模块，用于对数据进行存储；

数据转换模块，用于将数据分割并在多个数据存储模块内进行存储；

应用资源服务器模块，用于加载应用系统，并根据应用系统类型处理服务器对应连接的数据存储模块内的数据；

注册模块，用于记录数据存储模块、应用资源服务器模块的地址，以及数据存储模块与应用资源服务器模块的对应关系；以及

加密模块，用于对各个数据存储模块单独进行加密。

2.根据权利要求1所述的一种大数据集成系统，其特征在于：所述加密模块的加密方法包括以下步骤：

A、随机产生一个加密密钥，并将加密密钥按照DES算法生成一组子密钥；

B、将数据存储模块随机打包生成多个明文数据块；

C、每个明文数据块随机选取对一个子密钥对其进行加密运算，从而获得多个密文数据块；

D、将多个密文数据块共同构成输出的密文数据。

3.根据权利要求2所述的一种大数据集成系统，其特征在于：所述数据存储模块设置有8个，所述数据存储模块分成两组，每组4个。

4.根据权利要求3所述的一种大数据集成系统，其特征在于：所述数据转换模块的数据分割储存方法包括以下步骤：

1)将数据分割成8个部分，将这8个部分的数据和相对应的奇偶校验信息分别存储到写入第一组数据存储模块的4个数据存储模块内，写入的同时还会在这4块数据存储模块上写入校验信息，当读取写入的数据的时候会分别从4块硬盘上读取数据内容，再通过检验信息进行校验；

2)将第二组的4个数据存储模块的组成的逻辑硬盘，然后发出的I/O数据请求被转化为4项操作，其中的每一项操作都对应于一个数据存储模块；原先顺序的数据请求被平均分散到的4个数据存储模块中同时执行。

5.根据权利要求4所述的一种大数据集成系统，其特征在于：所述数据分割为垂直数据分割。

6.根据权利要求5所述的一种大数据集成系统，其特征在于：所述垂直数据分割按照日期或地域或业务领域或组织单位中的一个或多个依据进行分割。

7.根据权利要求6所述的一种大数据集成系统，其特征在于：所述加密密钥采用16字节密码，每字节密码的取值在1-8FH之间。

8.根据权利要求7所述的一种大数据集成系统，其特征在于：还包含有监控模块，用于对应用资源服务器模块进行监控，当应用资源服务器模块的性能指标大于第一阈值且小于第二阈值时，同时对两组数据存储模块进行写入工作；当应用资源服务器模块的性能指标大于第二阈值时，先控制写入第二组的数据存储模块，第二组的数据存储模块写入完毕后再对第一组的数据存储模块进行写入工作。