[发明专利]作业调度方法、装置、电子设备和存储介质

说明书

本申请提出一种作业调度方法、装置、电子设备和存储介质，其中，该方法包括：将待处理作业任务划分为多个子作业任务，并基于各个子作业任务所需要的目标执行环境信息，并从各个任务节点中，为各个子作业任务分配满足对应目标执行环境信息的目标任务节点，并在对应子作业任务支持远程挂载的情况下，将子作业任务远程挂载在对应目标执行节点上，以在对应目标执行节点执行子作业任务。由此，结合待处理作业任务中各个子作业任务所需要的执行环境信息，准确为各个子作业任务分配对应的目标任务节点，使得目标任务节点上的环境信息可以满足对应子作业任务的运行要求，继而可提高对应任务节点执行子作业任务的成功率。

技术领域

本申请涉及计算机技术领域，尤其涉及作业调度方法、装置、电子设备和存储介质。

背景技术

相关技术中，在有待处理作业任务的情况下，通常采用人工的方式将待处理作业任务中的各个子任务分配到对应的执行节点，然而，采用人工方式容易出现执行节点执行任务失败的情况，影响待处理作业任务地有效执行。

发明内容

本申请提出一种作业调度方法、装置、电子设备和存储介质，以解决相关技术中采用人工方式容易出现执行节点执行任务失败的情况，影响待处理作业任务地有效执行的技术问题。

本申请一方面实施例提出了一种作业调度方法，包括：获取待处理作业任务；将所述待处理作业任务划分为多个子作业任务；针对各个子作业任务，确定所述子作业任务所需要的目标执行环境信息；获取节点集群中各个执行节点的当前执行环境信息；从各个执行节点中，确定出当前执行环境信息满足所述目标执行环境信息的目标执行节点；在所述子作业任务支持远程挂载的情况下，将所述子作业任务远程挂载在所述目标执行节点上，以在所述目标执行节点执行所述子作业任务。

在一种可能的实施方式中，所述方法还包括：从共享数据区中获取各个所述子作业任务的执行结果，其中，各个所述子作业任务的执行结果是执行对应所述子作业任务的目标执行节点写入到所述共享数据区中的；根据各个所述子作业任务的执行结果，确定出所述待处理作业任务的执行结果。

在一种可能的实施方式中，所述方法还包括：在所述子作业任务不支持远程挂载的情况下，基于自定义通信协议将所述子作业任务发送给所述目标执行节点，以在所述目标执行节点上执行所述子作业任务。

在一种可能的实施方式中，所述方法还包括：接收所述目标执行节点通过所述自定义通信协议发送的执行结果，其中，所述执行结果是所述目标执行节点执行所述子作业任务所得到的。

在一种可能的实施方式中，所述方法还包括：在所述目标执行节点在执行所述子作业任务的过程中出现故障的情况下，从各个执行节点中，确定出当前执行环境信息满足所述目标执行环境信息的备份执行节点，其中，所述备份执行节点与所述目标执行节点不同；将所述子作业任务远程挂载在所述备份执行节点上，以在所述备份执行节点执行所述子作业任务。

在一种可能的实施方式中，所述确定子作业任务所需要的目标执行环境信息，包括：获取所述子作业任务的任务内容；根据所述任务内容，确定所述子作业任务的目标执行环境信息。

在一种可能的实施方式中，所述方法还包括：接收针对所述节点集群的节点添加指令，其中，所述节点添加指令用于指示在所述节点集群中添加新执行节点；根据所述节点增加指令，在所述节点集群中添加新执行节点。

在一种可能的实施方式中，所述方法还包括：接收节点删除指令，其中，所述节点删除指令用于指示将所述节点集群中的指定执行节点删除，其中，所述指定执行节点为所述节点集群中的各个执行节点中的至少一个；根据所述节点删除指令，将所述节点集群中的所述指定执行节点删除。