[发明专利]一种基于副本模式的深度学习训练任务管控方法及装置

说明书

本发明提出了一种基于副本模式的深度学习训练任务管控方法，包括：将用户输入的深度学习训练任务与训练任务副本绑定；监控模块监控训练任务副本，根据用户输入的操作发送控制指令；执行模块接收监控模块发送的控制指令，根据控制指令对深度学习训练任务进行处理，并将处理结果返回给监控模块，本发明还提出了一种基于副本模式的深度学习训练任务管控装置，有效解决由于现有深度任务训练需要花费大量时间和精力的问题，有效的提高了深度学习任务训练的高效进行。

技术领域

本发明涉及深度学习任务管理领域，尤其是涉及一种基于副本模式的深度学习训练任务管控方法及装置。

背景技术

深度学习是学习样本数据的内在规律和表示层次，这些学习过程中获得的信息对诸如文字，图像和声音等数据的解释有很大的帮助。它的最终目标是让机器能够像人一样具有分析学习能力，能够识别文字、图像和声音等数据。深度学习在搜索技术，数据挖掘，机器学习，机器翻译，自然语言处理，多媒体学习，语音，推荐和个性化技术，以及其他相关领域都取得了很多成果。深度学习使机器模仿视听和思考等人类的活动，解决了很多复杂的模式识别难题，使得人工智能相关技术取得了很大进步。

随着深度学习涉及的行业越来越多，同时也在其中发挥着越来越重要的作用，参与到该领域的算法工程师越来越多，每个算法工程师想要自己进行深度学习训练，首先需要搭建一个合适的训练环境，不仅要关心训练环境的配置，还需要对训练任务进行管理操作，例如创建任务、停止任务等操作。

但是，在运行训练之前，还需要工程师自己做大量的准备工作，往往会耗费算法工程师大量的时间和精力，不利于提高深度学习任务的高效进行。

发明内容

本发明为了解决现有技术中存在的问题，创新提出了一种基于副本模式的深度学习训练任务管控方法及装置，有效解决由于现有深度任务训练需要花费大量时间和精力的问题，有效的提高了深度学习任务训练的高效进行。

本发明第一方面提供了一种基于副本模式的深度学习训练任务管控方法，包括：

将用户输入的深度学习训练任务与训练任务副本绑定；

监控模块监控训练任务副本，根据用户输入的操作发送控制指令；

执行模块接收监控模块发送的控制指令，根据控制指令对深度学习训练任务进行处理，并将处理结果返回给监控模块。

可选地，所述将用户输入的深度学习训练任务与训练任务副本绑定具体包括：

获取用户输入的深度学习训练任务参数信息；

根据用户输入的深度学习训练任务参数信息，生成并保存对应的训练任务的训练任务副本，其中训练任务副本中包括用户输入的深度学习训练任务参数信息。

进一步地，所述用户输入的深度学习训练任务参数信息包括：迭代次数、训练框架、批数目、CPU使用数、GPU使用数。

可选地，监控模块监控训练任务副本，根据用户输入的操作发送控制指令包括：

监控模块实时监控训练任务副本，获取训练任务副本中用户深度学习训练任务创建指令，发送训练任务副本以及深度学习训练任务创建的控制指令；

监控模块实时监控训练任务副本，获取训练任务副本中用户深度学习训练任务排序指令以及最新排序信息，更新对应任务训练副本中的排序信息，发送对应训练任务副本以及对应深度学习训练任务排序的控制指令；

监控模块实时监控训练任务副本，获取训练任务副本中用户深度学习训练任务删除指令，发送对应训练任务副本以及深度学习训练任务删除的控制指令。

进一步地，执行模块接收监控模块发送的控制指令，根据控制指令对深度学习训练任务进行处理，并将处理结果返回给监控模块具体包括：