[发明专利]作业流程平台化调度方法

说明书

本公开提供了一种作业流程平台化调度方法，涉及卫星技术领域。其中，作业流程平台化调度方法包括：根据卫星的过境时间获取卫星遥感数据，并触发所述卫星遥感数据的处理流程；根据约束关系确定所述卫星遥感数据的处理流程的执行顺序；根据所述执行顺序采用分层调度的方式向所述处理流程分配处理资源，以采用所述处理资源执行所述处理流程。通过本公开的技术方案，通过合理确定卫星遥感数据处理流程的执行顺序，结合分层调度的方式对处理资源的调度，以实现处理资源的合理分配，从而能够提高卫星遥感数据处理的时效性。

技术领域

本公开涉及卫星数据处理技术领域，尤其涉及一种作业流程平台化调度方法。

背景技术

由于环境气象因素对生产、建设和设备运营的影响越来越明显，使气象数据等卫星遥感数据的应用也越来越广泛。

另外，随着计算机技术的不断发展，用户对气象服务的时效要求也不断提高，而气象服务基于遥感数据的处理执行，因此如何快速调度各类遥感数据的处理资源，以保证遥感数据处理的时效性以及气象服务的服务质量成为亟待解决的技术问题。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种作业流程平台化调度方法、装置、电子设备和计算机可读存储介质，能够提高卫星遥感数据处理的时效性，在卫星遥感数据用于气象服务的条件下，还能够提升卫星服务的服务质量。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

根据本公开的一个方面，提供一种作业流程平台化调度方法，包括：根据卫星的过境时间获取卫星遥感数据，并触发所述卫星遥感数据的处理流程；根据约束关系确定所述卫星遥感数据的处理流程的执行顺序；根据所述执行顺序采用分层调度的方式向所述处理流程分配处理资源，以采用所述处理资源执行所述处理流程。

在本公开的一个实施例中，所述根据约束关系确定所述卫星遥感数据的处理流程的执行顺序包括：根据所述约束关系将所述处理流程解析为符合作业接口标准的作业；将所述作业提交到不同的执行队列，所述执行队列根据执行优先级排列，以根据所述执行优先级确定所述执行顺序。

在本公开的一个实施例中，所述根据所述执行顺序采用分层调度的方式向所述处理流程分配处理资源，以采用所述处理资源执行所述处理流程包括：根据所述执行顺序生成每个所述作业的资源请求；响应于所述资源请求，向资源管理器发送应用请求；所述资源管理器根据所述应用请求采用所述分层调度的方式从所述执行队列中选择对应的目标容器，所述目标容器包括所述处理资源的节点；根据所述节点调用所述处理资源处理所述作业。

在本公开的一个实施例中，所述资源管理器根据所述应用请求采用所述分层调度的方式从所述执行队列中选择对应的目标容器包括：在第一层采用基于优先级的深度优先遍历算法选择所述执行队列；在选择所述执行队列后，在第二层按照优先级顺序对所述执行队列中的应用程序进行排序，并依次遍历排序后的所述应用程序，以确定与所述作业匹配的所述应用程序；在确定与所述作业匹配的所述应用程序后，在第三层根据所述优先级顺序与本地化顺序选择所述目标容器。

在本公开的一个实施例中，所述根据所述节点调用所述处理资源处理所述作业还包括：若检测到所述处理资源无法满足所述作业的处理需求，根据资源保证机制和/或资源抢占机制增加所述作业的备用资源。

在本公开的一个实施例中，所述根据所述节点调用所述处理资源处理所述作业还包括：采用REST接口连接监控系统，以监控所述作业的处理过程；若检测到所述作业在处理过程中产生异常，触发异常容错引擎解决所述异常，以结束所述作业或重启所述作业。