[发明专利]任务调度方法、装置、计算机设备和存储介质

说明书

本公开提供了一种任务调度方法、装置、计算机设备和存储介质，应用于任务调度系统，所述任务调度系统包括任务调度节点和多个任务处理节点，所述任务调度节点分别与每个任务处理节点通信连接；该方法包括：任务调度节点获取针对待分配任务的任务调度请求；所述任务调度请求中携带有所述待分配任务的任务标识和所述待分配任务的总量；基于所述任务调度请求中携带的总量，以及所述每个任务处理节点对应的处理能力，从所述待分配任务中确定为每个任务处理节点所分配的目标任务；将所述目标任务的任务标识发送给该目标任务所匹配的任务处理节点。本公开能够提高任务的处理效率。

技术领域

本公开涉及通信处理技术领域，具体而言，涉及一种任务调度方法、装置、计算机设备和存储介质。

背景技术

在传统的业务系统中，当用户量不大、数据量不多时，任务处理系统可以采用单机进行任务处理，处理任务需要的数据采用单表存储，数据可以存放在数据库中。

当需要批量处理某一表里面的数据，调度系统在固定时间点向任务处理设备发起单个任务，任务处理系统接收到任务处理指令，从数据库中循环捞取对应的数据，并对捞取到的数据进行处理。当任务量越来越多时，任务在任务处理设备中排队进行处理，处理任务所消耗的时间会越来越长，降低任务处理效率。

发明内容

本公开实施例至少提供一种任务调度方法、装置、计算机设备和存储介质，提高任务的处理效率。

第一方面，本公开实施例提供了一种任务调度方法，应用于任务调度系统，所述任务调度系统包括任务调度节点和多个任务处理节点，所述任务调度节点分别与每个任务处理节点通信连接；该方法包括：

任务调度节点获取针对待分配任务的任务调度请求；所述任务调度请求中携带有所述待分配任务的任务标识和所述待分配任务的总量；

基于所述任务调度请求中携带的总量，以及所述每个任务处理节点对应的处理能力，从所述待分配任务中确定为每个任务处理节点所分配的目标任务；

将所述目标任务的任务标识发送给该目标任务所匹配的任务处理节点。

在一种实施方式中，从所述待分配任务中确定为每个任务处理节点所分配的目标任务，包括：

基于各任务处理节点对应的处理能力，确定每个任务处理节点对应的任务分配系数；

基于每个任务处理节点对应的任务分配系数，以及所述任务调度请求中携带的总量，为各个可用任务处理节点确定所分配的待分配任务的分配数量；所述可用任务处理节点为任务处理节点列表中的节点地址信息对应的任务处理节点；

从所述待分配任务中，选择所述分配数量个任务，将选择的任务作为为该可用任务处理节点分配的目标任务。

在一种实施方式中，根据以下步骤确定每个任务处理节点的处理能力：

获取每个任务处理节点的历史任务处理时长；

基于各个任务处理节点对应的历史任务处理时长，确定每个任务处理节点的处理能力；或者，

获取每个任务处理节点的空闲数据处理资源；

基于各个任务处理节点的空闲数据处理资源，确定每个任务处理节点的处理能力。

在一种实施方式中，根据以下步骤更新任务处理节点列表中的节点地址信息：

获取多个节点地址信息；

若所述多个节点地址信息中存在节点地址信息与所述任务处理节点列表中的各个节点地址信息均不匹配，则将与所述任务处理节点列表中的各个节点地址信息均不匹配的节点地址信息添加到所述任务处理节点列表中；