[发明专利]数据处理方法及系统

权利要求书

1.一种数据处理方法，其特征在于，包括：

步骤一，按照预设的散列规则，将接收的待处理数据保存到磁盘目录下，所述散列规则中包含用于确定所述磁盘目录的各级子目录的散列因子；

步骤二，分布式部署数据处理系统，所述数据处理系统能够根据自身的配置数据，按照所述散列规则计算获得其待处理数据所在的磁盘目录，所述配置数据中包含用于确定所述磁盘目录的前几级子目录的散列因子；

步骤三，所述数据处理系统从其待处理数据所在的磁盘目录中读取待处理数据进行处理。

2.根据权利要求1所述的数据处理方法，其特征在于，所述散列规则包括：按照数据类型、业务优先级、接收日期、手机号码设定位的顺序依次确定保存待处理数据的磁盘目录的各级子目录，其中，数据类型、业务优先级、接收日期、手机号码设定位为散列因子。

3.根据权利要求1所述的数据处理方法，其特征在于，所述步骤二包括：

根据系统资源情况或者业务优先级分布式部署数据处理系统。

4.根据权利要求1所述的数据处理方法，其特征在于，所述待处理数据包括数据库数据、文件数据、webservice数据。

5.一种数据处理系统，其特征在于，包括顺次相连的保存模块、部署模块和处理模块，其中：

保存模块，用于按照预设的散列规则，将接收的待处理数据保存到磁盘目录下，所述散列规则中包含用于确定所述磁盘目录的各级子目录的散列因子；

部署模块，用于分布式部署数据处理系统，所述数据处理系统能够根据自身的配置数据，按照所述散列规则计算获得其待处理数据所在的磁盘目录，所述配置数据中包含用于确定所述磁盘目录的前几级子目录的散列因子；

处理模块，用于所述数据处理系统从其待处理数据所在的磁盘目录中读取待处理数据进行处理。

6.根据权利要求5所述的数据处理系统，其特征在于，所述散列规则包括：按照数据类型、业务优先级、接收日期、手机号码设定位的顺序依次确定保存待处理数据的磁盘目录的各级子目录，其中，数据类型、业务优先级、接收日期、手机号码设定位为散列因子。

7.根据权利要求5所述的数据处理系统，其特征在于，所述部署模块包括第一部署单元或第二部署单元，其中：

第一部署单元，用于根据系统资源情况分布式部署数据处理系统；

第二部署单元，用于根据业务优先级分布式部署数据处理系统。

8.根据权利要求5所述的数据处理系统，其特征在于，所述待处理数据包括数据库数据、文件数据、webservice数据。