[发明专利]高效大数据存储方法

权利要求书

1.一种高效大数据存储方法，其特征在于包括如下步骤：

S1：接收对象数据，并识别对象数据的属性信息；

S2：根据对象数据的属性信息将其对象数据存储至存储系统中的第一存储子系统；

S3：将所述存储至存储系统中第一存储子系统的对象数据的关联关系和模式存储至存储系统中的第二存储子系统；

S4：选取至少两台服务器启动GlusterFS服务，将所述至少两台服务器的本地存储资源共享成GlusterFS的基本存储单元，并将所述基本存储单元组成一个GlusterFS的卷；

S5：在所述挂载所述卷的服务器上启动Hadoop的名称节点服务，并将所述名称节点的数据存储在挂载的卷上；

S6：对存储设备物理性能的提升，变换设备内机械硬盘更换为固态硬盘；以及

S7：采用RAID1+0技术可大大提高系统性能；并针对I/O负载进行优化，提高特定存储模式下的存储性能。

2.根据权利要求1所述的高效大数据存储方法，其特征在于：所述对象数据包含结构化数据、半结构化数据或非结构化数据中的至少一种，并且该方法还包括，在接收对象数据之前，在对象数据的创建时，设定结构化数据、半结构化数据和非结构化数据与存储单元之间的对应关系，所述第一存储子系统由并行数据库单元和Hadoop平台组成，Hadoop平台包括HDFS单元、HBase单元和Hive单元，其中，HDFS单元存储非结构化数据，HBase单元和Hive单元存储半结构化数据，并行数据库单元存储结构化数据。