[发明专利]多任务分配方法、装置、电子设备及存储介质

说明书

本申请提供一种多任务分配方法、装置、电子设备及存储介质。方法包括：接收用户发送的任务请求，并根据所述任务请求，获取待执行任务的分配策略；获取当前各客户端的注册信息；其中，注册信息包括客户端的环境标识、客户端的标识以及客户端的当前状态信息；从所述各客户端中确定待选客户端，并按照所述待执行任务的分配策略，确定所述待选客户端中的第一客户端，并将所述待执行任务分配给所述第一客户端执行。本申请的方案，在多任务并发时，能够实现任务合理分配，提高了资源利用率和任务执行效率。

技术领域

本申请涉及大数据技术，尤其涉及一种多任务分配方法、装置、电子设备及存储介质。

背景技术

随着科技的进步和大数据时代的来临，为了节省时间，数据处理和信息分析普遍应用多任务实现，接收到任务请求之后，需要将任务分配给客户端执行。实际应用中，存在任务分配不均的情况，即存在某些客户端待执行任务量超过可承受数量，而某些客户端处于空闲状态。客户端的待执行任务量超过可承受数量，会使得正在执行的任务的执行效率降低；客户端处于空闲状态，会造成客户端资源的浪费。

合理将多任务分配给客户端执行，可以有效提高资源利用率和任务执行效率。目前，给多个任务分配客户端执行时，采用人工挑选节点或程序自动提交的方式，资源利用率和任务执行效率较低。

发明内容

本申请提供一种多任务分配方法、装置、电子设备及存储介质，用以解决多任务并发时，资源利用率和任务执行效率较低的问题。

第一方面，本申请提供一种多任务分配方法，包括：接收用户发送的任务请求，并根据所述任务请求，获取待执行任务的分配策略；其中，所述任务请求包括待执行任务的环境标识和待执行任务，所述待执行任务的环境标识表征所述待执行任务的执行环境类型；获取当前各客户端的注册信息；其中，所述注册信息包括客户端的环境标识、客户端的标识以及客户端的当前状态信息；从所述各客户端中确定待选客户端，并按照所述待执行任务的分配策略，确定所述待选客户端中的第一客户端，并将所述待执行任务分配给所述第一客户端执行；其中，所述待选客户端的环境标识与所述待执行任务的环境标识一致。

在一种可能的实施方式中，所述方法还包括：从第一缓存数据库中获取所述各客户端的环境标识、所述各客户端的当前状态信息以及所述各客户端的标识；其中，所述各客户端的环境标识、所述各客户端的当前状态信息以及所述各客户端的标识是所述各客户端在所述第一缓存数据库下进行注册后写入的；采用哈希数据结构，将所述各客户端的环境标识、所述各客户端的当前状态信息以及所述各客户端的标识存储至第二缓存数据库，以建立所述各客户端的注册信息；其中，所述哈希数据结构包括键、字段以及值，所述键用于存储预设标识，所述字段用于存储客户端的环境标识，所述值用于存储客户端的当前状态信息以及客户端的标识。

在一种可能的实施方式中，所述从所述各客户端中确定待选客户端，包括：从所述各客户端的注册信息中选取第一注册信息，所述第一注册信息的字段中存储的环境标识与所述待执行任务的环境标识一致；读取所述第一注册信息的值中存储的客户端的标识，将该标识对应的客户端确定为所述待选客户端。

在一种可能的实施方式中，所述方法还包括：根据所述各客户端的注册信息的值中存储的所述当前状态信息，获得所述各客户端的注册时间；从所述各客户端的注册信息中，删除其注册时间与当前时间的时间差超过预定阈值的客户端的注册信息。

在一种可能的实施方式中，所述将所述待执行任务分配给所述第一客户端执行，包括：根据所述任务请求，生成所述待执行任务唯一对应的日志以及所述日志的日志密钥；将所述待执行任务和所述日志密钥发送至所述第一客户端，以使所述第一客户端执行所述待执行任务并基于所述日志密钥将任务执行状态更新至所述日志中；所述方法还包括：基于所述日志密钥，通过监听所述日志获得所述待执行任务的任务执行状态。