[发明专利]一种基于容器的大规模异构数据管理方法

权利要求书

1.一种基于容器的大规模异构数据管理方法，其特征在于，包括以下步骤：

步骤1、数据中心管理平台下发数据采集需求给数据端；

步骤2、数据端根据数据采集需求，将数据中心需要的数据从数据源进行采集，并存储到移动介质；

步骤3、数据中心安装部署数据管理所需环境；

步骤4、数据中心管理平台将被采集的数据文件从移动存储介质上传到数据中心的分布式存储集群；

步骤5、用户通过数据中心管理平台选择对应的数据，通过Kubernetes启动一个与选择数据所使用数据库对应的Docker容器，并通过Docker容器的文件挂载技术挂载被选择的数据文件，启动完成后为用户返回数据库相应的连接参数；

步骤6、用户使用数据中心管理平台统一管理数据中心的数据。

2.如权利要求1所述的基于容器的大规模异构数据管理方法，其特征在于，所述步骤2中数据端采集数据中心需要的数据，具体执行以下步骤：

步骤2.1、数据端安装Docker容器，并导入与数据端数据库符合的Docker镜像；

步骤2.2、数据端启动一个与被采集数据所使用数据库相符合的Docker容器；

步骤2.3、数据端保存被采集数据的信息，如数据库类型、编码方式、采集人等，方便数据中心查看数据信息并溯源；

步骤2.4、数据端根据启动容器的连接参数连接容器数据库，并运行相应的数据采集脚本将需要上传到数据中心的数据导入到Docker容器中；

步骤2.5、将容器中数据库的数据文件拷贝到移动存储介质，然后转存到数据中心或者直接通过网络将数据文件上传到数据中心，此时数据采集结束。

3.如权利要求1所述的基于容器的大规模异构数据管理方法，其特征在于，所述步骤3中，数据中心安装部署数据管理所需环境，包括安装Docker软件包、Kubernetes软件包，导入需要的镜像，并在数据中心搭建高可靠分布式存储系统用于存储数据文件。

4.如权利要求1所述的基于容器的大规模异构数据管理方法，其特征在于，所述步骤6中用户使用数据中心管理平台统一管理数据中心的数据，具体包括以下内容：包括管理数据存储、启动、查看的数据，并根据需要进行数据汇总、数据校验操作。

5.如权利要求1至4中任意一项所述的基于容器的大规模异构数据管理方法，其特征在于，所述数据中心管理平台基于Kubernetes实现对Docker数据集群的管理。