[发明专利]一种老化历史数据的方法和装置

权利要求书

1.一种老化历史数据的方法，其特征在于，包括以下步骤：

设置配置文件，所述配置文件中包括属性目录的路径和所述属性目录下数据的保存周期；

将待存储的数据按属性分类后，存入对应属性目录下的对应日期目录下；以及

根据所述配置文件中记录的所述属性目录的路径和所述保存周期，删除所述属性目录中的所述保存周期以外的日期目录中的数据。

2.根据权利要求1所述的方法，其特征在于，所述方法基于HDFS分布式文件系统。

3.根据权利要求2所述的方法，其特征在于，所述删除的数据进入所述HDFS分布式文件系统的回收箱，其中所述方法还包括：

根据所述配置文件，将被删除到所述回收箱中的所述删除数据彻底清除。

4.根据权利要求2所述的方法，其特征在于，所述根据所述配置文件中记录的属性目录的路径和所述保存周期，删除所述属性目录中的所述保存周期以外的日期目录中的数据包括：

读取所述配置文件获取属性目录的路径和保存周期，找到所述属性目录并遍历下级日期目录，根据系统时间和所述保存周期推算需要保存的数据和需要删除的数据。

5.根据权利要求4所述的方法，其特征在于，所述根据所述配置文件中记录的所述数据的属性目录的路径和所述保存周期，删除所述属性目录中的所述保存周期以外的数据还包括：

通过调用Hadoop的API将所述属性目录中的所述保存周期以外的数据进行删除。

6.根据权利要求3所述的方法，其特征在于，所述根据所述配置文件，将被删除到所述回收箱中的所述删除数据彻底清除包括：根据所述配置文件中记录的属性目录和保存周期，将被移到回收箱中的所述删除数据彻底清除，以释放集群存储空间。

7.一种老化历史数据的装置，其特征在于，包括至少一个处理器和存储器，所述存储器存储有处理器可运行的程序代码，所述程序代码在被处理器运行时执行以下步骤：

设置配置文件，所述配置文件中包括属性目录的路径和所述属性目录下数据的保存周期；

将待存储的数据按属性分类后，存入对应属性目录下的对应日期目录下；以及

根据所述配置文件中记录的所述数据的属性目录的路径和所述保存周期，删除所述属性目录中的所述保存周期以外的日期目录中的数据。

8.根据权利要求7所述的装置，其特征在于，所述装置应用于HDFS分布式文件系统。

9.根据权利要求8所述的装置，其特征在于，所述步骤还包括：通过调用Hadoop的API将所述属性目录中的所述保存周期以外的数据删除到所述HDFS分布式文件系统的回收箱。

10.根据权利要求9所述的装置，其特征在于，所述步骤还包括：根据所述配置文件，将被删除到所述回收箱中的所述删除数据彻底清除。