[发明专利]一种Notebook任务的调度方法、设备及计算机可读存储介质

权利要求书

1.一种Notebook任务调度方法，其特征在于，所述方法包括：

S101、同步Notebook脚本到Zeppelin管理平台；

S102、在所述Zeppelin管理平台上配置Notebook调度，并在Kubernetes上创建定时任务；

S103、所述定时任务启动Kubernetes Notebook任务驱动程序执行；

S104、更新所述Kubernetes Notebook任务驱动程序Pod状态。

2.如权利要求1所述的方法，其特征在于，所述同步Notebook脚本到Zeppelin管理平台，包括：

修改所述Zeppelin软件，在Notebook笔记脚本的创建逻辑中增加调用所述Zeppelin管理平台接口的功能；

所述Zeppelin管理平台脚本创建接口获取到脚本相关信息后，保存新建的笔记到笔记数据库中，所述脚本相关信息包括脚本ID；

所述Zeppelin管理平台通过查询所述笔记数据库中笔记库表并通过列表展示在Zeppelin中创建的Notebook。

3.如权利要求2所述的方法，其特征在于，所述脚本相关信息还包括脚本名称、脚本创建人、或脚本创建时间中的一个或多个。

4.如权利要求1所述的方法，其特征在于，所述在所述管理平台上配置Notebook调度，并在Kubernetes上创建定时任务，包括：

在所述Zeppelin管理平台上配置针对脚本的定时调度，保存调度信息到数据库中；

在所述Zeppelin管理平台后端生成Kubernetes定时任务对象；

调用Kubernetes API服务器创建Kubernetes定时任务，Kubernetes持久化定时任务信息。

5.如权利要求4所述的方法，其特征在于，所述在所述Zeppelin管理平台后端生成Kubernetes定时任务对象，具体包括：

获取需要调度的笔记ID和笔记请求链接元信息，构建定时任务所需要的镜像和提交定时任务所使用的命名空间信息，共同生成Kubernetes上的定时任务对象。

6.如权利要求5所述的方法，其特征在于，在获取需要调度的笔记ID和笔记请求链接原信息时，获取笔记创建人信息。

7.如权利要求1所述的方法，其特征在于，所述Kubernetes Notebook任务驱动程序软件包以镜像方式提供，所述Kubernetes Notebook任务驱动程序被执行时实现以下步骤：

当达到预定时间所述Kubernetes定时任务启动时，向数据库中插入运行对应笔记的实例信息，并设置实例状态为就绪状态；

所述Kubernetes Notebook任务驱动程序获取到配置信息后通过调用Zeppelin的restful接口去启动运行对应的笔记；

所述Kubernetes定时任务被驱动运行后，所述Kubernetes Notebook驱动程序同步去查询任务执行状态以更新当前实例的执行结果。

8.如权利要求1所述的方法，其特征在于，所述更新Kubernetes Notebook任务驱动程序Pod状态，包括监听和轮询Pod状态以更新Pod状态。

9.一种Notebook任务调度设备，包括：

一个或多个处理器；

存储器；以及

一个或多个计算机程序，所述处理器和所述存储器通过总线连接，其中所述一个或多个计算机程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至8任一项所述的Notebook任务调度方法的步骤。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至8任一项所述的Notebook任务调度方法的步骤。