[发明专利]分布式通用任务管理方法和系统

说明书

本发明提供了分布式通用任务管理方法和系统，其通过服务端将来自客户端的任务划分为若干子任务，并将所有子任务排列形成子任务队列；对子任务队列的每个子任务依次进行任务加载处理，得到每个子任务对应的task对象，继而生成与每个子任务对应的任务step；通过客户端对任务step进行辨识与执行处理，并将执行处理的结果返回至服务端；通过服务端对任务step的执行处理的结果进行整合，从而得到任务的整体执行结果，其通过服务端将任务进行拆分，并将拆分得到的所有子任务进行分布式处理，根据每个子任务生成task对象，继而得到相应的任务step，通过客户端执行每个任务step，从而减少任务处理所需的时间和计算量，提高任务处理效率。

技术领域

本发明涉及计算机开发的技术领域，特别涉及分布式通用任务管理方法和系统。

背景技术

随着物联网业务数据的不断增长，若对每个物联网业务均进行个性化定制处理，不仅增加物联网业务数据的开发处理工作量，还无法实现对业务数据的快速便捷维护，降低物联网业务数据的处理效率。现有技术都是将单个业务交于单个开发人员进行专门处理，这使得无法对业务进行多线并行处理，从而增大业务处理所需的时间和数据计算量，无法实现任务处理的标准化、服务化和流水线化。

发明内容

针对现有技术存在的缺陷，本发明提供分布式通用任务管理方法和系统，其通过服务端将来自客户端的任务划分为若干子任务，并将所有子任务排列形成子任务队列；对子任务队列的每个子任务依次进行任务加载处理，得到每个子任务对应的task对象，继而生成与每个子任务对应的任务step；通过客户端对任务step进行辨识与执行处理，并将执行处理的结果返回至服务端；通过服务端对任务step的执行处理的结果进行整合，从而得到任务的整体执行结果，其通过服务端将任务进行拆分，并将拆分得到的所有子任务进行分布式处理，根据每个子任务生成task对象，继而得到相应的任务step，通过客户端执行每个任务step，这样可实现任务处理的标准化、服务化和流水线化，从而减少任务处理所需的时间和计算量，提高任务处理效率。

本发明提供分布式通用任务管理方法，其包括如下步骤：

步骤S1，将客户端当前任务发送至服务端，通过所述服务端将所述任务划分为若干子任务，并对所有子任务进行预处理和排列，从而得到子任务队列；

步骤S2，对所述子任务队列包含的所有子任务依次进行任务加载处理，得到每个子任务对应的task对象；根据所述task对象，生成与每个子任务对应的任务step，并将所述任务step返回至所述客户端；

步骤S3，通过所述客户端对所述任务step进行辨识与执行处理，并将执行处理的结果返回至所述服务端；通过所述服务端对所述任务step的执行处理的结果进行整合，从而得到所述任务的整体执行结果。

进一步，在所述步骤S1中，将客户端当前任务发送至服务端，通过所述服务端将所述任务划分为若干子任务，并对所有子任务进行预处理和排列，从而得到子任务队列具体包括：

将客户端当前任务发送至服务端，通过所述服务端获取所述任务对应的任务数据逻辑信息，将所述任务划分为若干子任务；其中，每个任务分别对应于所述任务的一个任务数据逻辑环节；

对所有子任务分别进行子任务数据规范化预处理，再根据所有子任务在所述任务中的数据处理逻辑先后关系，将所有子任务依次排列形成子任务队列。

进一步，在所述步骤S2中，对所述子任务队列包含的所有子任务依次进行任务加载处理，得到每个子任务对应的task对象；根据所述task对象，生成与每个子任务对应的任务step，并将所述任务step返回至所述客户端具体包括：

对所述子任务队列包含的所有子任务分别进行解析处理，以此获得每个子任务的任务参数；其中，所述任务参数包括所述子任务的任务数据类型和任务数据量；