[发明专利]数据处理方法、装置、设备、介质和计算机程序产品

权利要求书

1.一种数据处理方法，其特征在于，所述方法包括：

接收待处理的数据；

将接收到的所述数据进行逻辑拆分，以生成一个或多个处理任务；

将所述一个或多个处理任务分发到一个或多个处理单元，以进行并行处理；

从所述一个或多个处理单元接收所述一个或多个处理任务的处理结果；

将接收到的所述一个或多个处理任务的处理结果进行逻辑整合，以形成接收到的所述数据的处理结果。

2.根据权利要求1所述的方法，其特征在于，将接收到的所述数据进行逻辑拆分，以形成一个或多个处理任务包括：

将接收到的所述数据逻辑拆分为一个或多个逻辑数据，每个逻辑数据包括对应的标识符，并且所述标识符包括对应的逻辑数据的开始位置、结束位置和处理规则；

基于所述一个或多个逻辑数据的一个或多个标识符，生成所述一个或多个处理任务。

3.根据权利要求2所述的方法，其特征在于，每个处理单元基于对应的处理任务中的标识符，访问从对应的开始位置到对应的结束位置之间的对应的逻辑数据，并且使用对应的处理规则来处理所述逻辑数据，以生成所述处理任务的处理结果。

4.根据权利要求3所述的方法，其特征在于，将接收到的所述一个或多个处理任务的处理结果进行逻辑整合，以形成接收到的所述数据的处理结果包括：

基于对应的处理任务中的标识符，将所述处理任务的处理结果按照对应的开始位置和对应的结束位置进行排序和逻辑整合，以形成接收到的所述数据的处理结果。

5.根据权利要求1至4中任一项所述的方法，其特征在于，基于接收到的所述数据的数据类型和数据量，确定所述一个或多个处理任务的任务量。

6.根据权利要求1至4中任一项所述的方法，其特征在于，接收到的所述数据包括批处理数据，每个批处理数据包括一个或多个数据步，并且对于每个数据步进行逻辑拆分。

7.一种数据处理装置，其特征在于，所述装置包括：

数据接收单元，用于接收待处理的数据；

逻辑拆分单元，用于将接收到的所述数据进行逻辑拆分，以生成一个或多个处理任务；

任务分发单元，用于将所述一个或多个处理任务分发到一个或多个处理单元，以进行并行处理；

结果接收单元，用于从所述一个或多个处理单元接收所述一个或多个处理任务的处理结果；

逻辑整合单元，用于将接收到的所述一个或多个处理任务的处理结果进行逻辑整合，以形成接收到的所述数据的处理结果。

8.一种计算机设备，其特征在于，所述计算机设备包括存储有计算机可执行指令的存储器和处理器，所述处理器被配置为执行所述指令以实施根据权利要求1至6中任一项所述的数据处理方法。

9.一种使用计算机程序编码的计算机存储介质，其特征在于，所述计算机程序包括指令，所述指令被计算机执行以实施根据权利要求1至6中任一项所述的数据处理方法。

10.一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机指令，所述计算机指令被执行时，实现根据权利要求1至6中任一项所述的数据处理方法。