[发明专利]一种任务的调度方法、装置、设备及存储介质

权利要求书

1.一种任务的调度方法，其特征在于，所述调度方法应用于任务调度系统，所述任务调度系统包括：任务发起终端、负载服务器以及多个任务执行终端；所述调度方法包括：

所述负载服务器接收所述任务发起终端发送的针对目标任务的数据接收请求；其中，所述目标任务用于表征利用多种不同类型的目标训练数据构建目标模型的建模任务；所述数据接收请求中至少包括：所述目标任务的任务标识以及每一所述目标训练数据的数据标识；

所述负载服务器根据预先存储的任务处理映射表，从所述多个任务执行终端中，确定针对所述目标任务的目标任务执行终端；其中，所述任务处理映射表中至少包括：多个不同任务的任务标识、每一所述任务对应的多个训练数据的数据标识以及每一所述训练数据对应的通信端口地址；不同的目标任务执行终端上存储的所述目标训练数据不同；

所述负载服务器向每一所述目标任务执行终端发送针对该目标任务执行终端的数据传输请求，并接收该目标任务执行终端发送的目标数据处理结果；其中，所述目标数据处理结果用于表征该目标任务执行终端对应的所述目标训练数据在所述目标任务下对应的数据处理结果；

所述负载服务器将接收到的每一所述目标数据处理结果作为针对所述目标任务的任务执行结果，并将所述任务执行结果发送给所述任务发起终端；

其中，当所述任务发起终端以及每一所述任务执行终端分别对应不同的数据加密规则和数据解密规则时，所述数据接收请求中还包括：所述任务发起终端上的数据加密规则与数据解密规则；每一所述目标任务执行终端向所述负载服务器发送的是所述目标数据处理结果的第一加密结果；所述第一加密结果是每一所述目标任务执行终端按照该目标任务执行终端上的数据加密规则，对所述目标数据处理结果进行加密处理后得到的；所述任务处理映射表中还包括：每一所述任务执行终端上的数据加密规则和数据解密规则。

2.根据权利要求1所述的调度方法，其特征在于，在所述负载服务器接收所述任务发起终端发送的针对目标任务的数据接收请求之前，所述调度方法，还包括：

所述任务发起终端响应针对所述目标任务的启动操作，从所述多个任务执行终端中，确定每一所述目标训练数据所在的任务执行终端为该目标训练数据对应的第一任务执行终端；

所述任务发起终端针对每一所述第一任务执行终端，生成该第一任务执行终端对应的任务创建请求，并将所述任务创建请求发送给该第一任务执行终端；其中，所述任务创建请求中包括：所述目标任务的任务标识、该第一任务执行终端的终端标识、该第一任务执行终端对应的所述目标训练数据的数据标识以及该目标训练数据在所述目标任务下的数据处理规则；

每一所述第一任务执行终端在接收到所述任务创建请求后，启动针对所述目标任务的目标容器，通过所述目标容器处理该第一任务执行终端上存储的所述目标训练数据，并将所述目标容器的容器端口信息发送给所述负载服务器；其中，所述容器端口信息中至少包括：所述目标任务的任务标识、所述目标容器的容器端口地址以及所述目标容器处理的目标训练数据的数据标识；

所述负载服务器在接收到每一所述目标容器发送的所述容器端口信息后，以所述容器端口信息中的容器端口地址作为该目标容器处理的所述目标训练数据对应的通信端口地址，将所述容器端口信息存入所述任务处理映射表中。

3.根据权利要求2所述的调度方法，其特征在于，所述启动针对所述目标任务的目标容器，通过所述目标容器处理该第一任务执行终端上存储的所述目标训练数据，包括：

所述第一任务执行终端响应于接收到的所述任务创建请求，根据该任务创建请求中包括的所述目标任务的任务标识，生成针对所述目标任务的虚拟容器启动指令；

根据所述虚拟容器启动指令，生成针对所述目标任务的虚拟容器，并将生成的该虚拟容器作为所述目标容器；

通过打包镜像的方式，将该第一任务执行终端上存储的所述目标训练数据与该目标训练数据在所述目标任务下对应的环境依赖信息，存放到所述目标容器中；其中，所述环境依赖信息用于表征该目标训练数据在所述目标任务下对应的数据运行环境；

在所述目标容器中，按照该目标训练数据在所述目标任务下的数据处理规则，对该目标训练数据进行数据处理，得到该目标训练数据对应的所述目标数据处理结果。