[发明专利]任务调度方法、调度系统、电子设备及计算机存储介质

说明书

本发明实施例公开了一种任务调度方法、调度系统、电子设备及计算机存储介质。该任务调度方法包括：存储已有任务之间的依赖关系以及触发条件；周期性获取所述消息队列中的消息并解析；确定由任务的执行状态而划分形成的任务列表；根据所述依赖关系，触发条件以及任务列表，筛选当前需执行的任务；将所述当前需执行的任务下发至执行引擎；根据所述执行引擎的任务执行情况，更新所述消息队列。其通过消息队列实现了任务执行和任务调度之间的解耦，保证任务调度过程的灵活性，满足实时触发、条件触发以及管理简易的使用需求。

技术领域

本发明涉及任务调度技术领域，尤其涉及一种任务调度方法、调度系统、电子设备及计算机存储介质。

背景技术

任务调度是后端系统平台或者大数据系统平台在运行过程中，根据任务的触发条件以及依赖关系等一系列的规则，确定各个任务现有的执行顺序的过程。有效的任务调度能够帮助这些系统平台高效的运转，提升作业效率。

在现有的任务调度系统中，不同项目任务之间的依赖调度是基于定时任务对所依赖的任务的状态来进行检测判断，从而确定是否继续执行下游任务。

例如，B任务依赖于A任务，并且A任务和B任务的执行周期是不同的情况下，就需要启动多个定时任务，定时执行A任务的同时定时运行B任务去检测A任务是否完成，直至A任务完成则继续则执行B任务。当然，A任务出现失败则进行告警。

这样的任务调度方式在任务之间依赖数量多的时候，需要启动的定时任务数量较多，难以管理。而且，定时任务的启动时间是基于经验进行设定。例如，假设A任务通常执行完成的时间为15:00，那么B任务的启动时间就应该为15:00以后，并且需要进行循环检测的操作，保证B任务不会因为A任务执行进度的延迟而失败，增加操作的复杂度。

甚至无法实现一些特定的定时任务的自动触发需求，例如每天执行日报的定时任务，同时在最后一天日报任务执行完成后实时触发月报的任务。

因此，迫切需要提供一种新的任务调度方法来解决以上的一个或者多个问题。

发明内容

本发明的实施例提供了一种任务调度方法、调度系统、电子设备及存储介质，用于解决现有的任务调度系统中存在的一种或者多种问题。

本发明实施例的第一方面提供了一种任务调度方法。该任务调度方法包括：

存储已有任务之间的依赖关系以及触发条件；周期性获取所述消息队列中的消息并解析；确定由任务的执行状态而划分形成的任务列表；根据所述依赖关系，触发条件以及任务列表，筛选当前需执行的任务；将所述当前需执行的任务下发至执行引擎；根据所述执行引擎的任务执行情况，更新所述消息队列。

可选地，周期性获取所述消息队列中的消息，确定任务在执行引擎中的执行情况，具体包括：

以设定的周期，获取所述消息队列中的消息；解析所获取的消息获得任务执行状态，根据任务状态将任务信息存至对应的任务列表。可选地，根据所述依赖关系，触发条件以及任务列表，筛选当前需执行的任务，具体包括：

遍历任务状态为已执行完毕的任务列表，确定所述已执行完毕的任务列表中每个任务的下游任务；根据所述依赖关系，判断所述下游任务依赖的任务是否均已执行完毕；若是，确定为当前需执行的任务；若否，移动至任务状态为等待执行的任务列表。

可选地，在周期性获取所述消息队列中的消息，确定任务在执行引擎中的执行状态前，所述方法还包括：

确定需要被首个执行的初始任务；将所述初始任务下发至所述任务引擎。