[发明专利]一种数据存储方法、装置和系统

权利要求书

1.一种数据存储的方法，应用于HBase集群，其特征在于，所述HBase集群部署的数据存储系统包括硬盘驱动器HDD和固态硬盘SSD；所述SSD和HDD共同分担数据文件的存储；所述方法包括：

获取待存储的数据文件；

将所述数据文件中的一部分存储于所述HDD，一部分存储于所述SSD。

2.根据权利要求1所述的方法，其特征在于，所述将所述数据文件中的一部分存储于所述HDD，一部分存储于所述SSD，包括：

收集所述HDD和SSD上各数据文件的访问频率信息，依据访问频率信息将各数据文件分为冷数据和热数据；

调度热数据到SSD以及调度冷数据到HDD。

3.根据权利要求1所述的方法，其特征在于，所述HDD的总存储容量大于所述SSD的总存储容量。

4.根据权利要求3所述的方法，其特征在于，所述HDD与所述SSD的总存储容量比例约为8:2。

5.根据权利要求2所述的方法，其特征在于，所述依据访问频率信息将各数据文件分为冷数据和热数据包括：

依据访问频率信息对各数据文件进行排序，将排在前M个的数据文件确定为热数据，所述前M个数据文件的大小小于或等于所述SDD的总存储容量。

6.根据权利要求2至5任一权项所述的方法，其特征在于，所述调度热数据到SSD以及调度冷数据到HDD包括：

按照一定的顺序对当前存储在HDD上的热数据进行调度，将被调度的数据文件转存到当前具有足够存储空间的SSD；以及，

按照一定的顺序对当前存储在SSD上的冷数据进行调度，将被调度的数据文件转存到当前具有足够存储空间的HDD。

7.根据权利要求6所述的方法，其特征在于，所述一定的顺序包括：

按照随机挑选出的顺序，按照所在HDD或SSD编号的顺序或者按照访问频率的顺序。

8.根据权利要求6所述的方法，其特征在于，在将被调度的数据文件转存到SSD上时，优选转存到当前负载最小的SSD上；

在将被调度的数据文件转存到HDD上时，优先转存到当前负载最小的HDD上。

9.一种数据存储的装置，应用于HBase集群，其特征在于，该装置应用于所述HBase集群，所述HBase集群部署了包括HDD和SSD的数据存储系统，所述SSD和HDD共同分担数据文件的存储；所述装置包括：

收集单元，用于获取待存储的数据文件；

调度单元，用于将所述数据文件中的一部分存储于所述HDD，一部分存储于所述SSD。

10.根据权利要求9所述的装置，其特征在于，所述装置还包括判别单元；

所述收集单元，用于收集所述HDD和SSD上各数据文件的访问频率信息；

所述判别单元，用于依据访问频率信息将所述各数据文件分为冷数据和热数据；

所述调度单元，用于调度热数据到SSD以及调度冷数据到HDD。

11.根据权利要求10所述的装置，其特征在于，所述判别单元，具体用于依据访问频率信息对所述各数据文件进行排序，将排在前M个的数据文件确定为热数据，所述前M个数据文件的大小小于或等于所述SDD的总存储容量。

12.根据权利要求10所述的装置，其特征在于，所述调度单元，具体用于按照一定的顺序对当前存储在HDD上的热数据进行调度，将被调度的数据文件转存到当前具有足够存储空间的SSD；以及，

按照一定的顺序对当前存储在SSD上的冷数据进行调度，将被调度的数据文件转存到当前具有足够存储空间的HDD。