[发明专利]一种分布式工作流调度的方法、装置及计算机设备有效
申请号: | 201710005620.8 | 申请日: | 2017-01-04 |
公开(公告)号: | CN106874084B | 公开(公告)日: | 2020-04-07 |
发明(设计)人: | 苗科展;孟宪军 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 杨泽;刘芳 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种分布式工作流调度的方法和装置,获取用户提供的作业执行指令、工作流拓扑关系以及作业间的依赖关系,基于所述工作流拓扑关系和所述作业间的依赖关系查找与所述作业执行指令对应的节点,获取已准备就绪的所述节点,通过资源管理模块确定已准备就绪的所述节点所需要的资源配额,并通过集群资源调度系统调度与所述集群资源配额对应的资源至所述资源管理模块由已获取所述资源的所述资源管理模块通过资源调度代理发送启动指令,以启动远程作业执行模块执行所述作业执行指令。本发明可以基于作业间复杂的依赖关系遍历Flow的拓扑,实现了工作流的分布式化运行,分离了工作流中的调度逻辑与执行逻辑,并分离了工作流的调度与资源管理逻辑。 | ||
搜索关键词: | 一种 分布式 工作流 调度 方法 装置 计算机 设备 | ||
【主权项】:
一种分布式工作流调度的方法,其中,该方法包括以下步骤:a.获取用户提供的作业执行指令、工作流拓扑关系以及作业间的依赖关系;b.基于所述工作流拓扑关系和所述作业间的依赖关系查找与所述作业执行指令对应的节点,获取已准备就绪的所述节点;c.通过资源管理模块确定已准备就绪的所述节点所需要的资源配额,并通过集群资源调度系统调度与所述集群资源配额对应的资源至所述资源管理模块;d.由已获取所述资源的所述资源管理模块通过资源调度代理发送启动指令,以启动远程作业执行模块执行所述作业执行指令。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710005620.8/,转载请声明来源钻瓜专利网。
- 上一篇:一种数采系统人机接口任务调度方法
- 下一篇:一种自启应用的管理方法及终端