[发明专利]资源复用方法、装置、终端和计算机可读存储介质有效
| 申请号: | 201810797252.X | 申请日: | 2018-07-19 |
| 公开(公告)号: | CN108874549B | 公开(公告)日: | 2021-02-02 |
| 发明(设计)人: | 尹承忱 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F9/48;G06F9/54 |
| 代理公司: | 北京市铸成律师事务所 11313 | 代理人: | 张臻贤;江宇 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 资源 方法 装置 终端 计算机 可读 存储 介质 | ||
1.一种资源复用方法,其特征在于,包括:
主进程根据任务并发量向资源管理器申请多个容器资源,所述任务并发量包括待执行任务的数量,并基于客户需求和待执行任务数量获得所述容器资源的数量;
所述主进程向申请到的所述容器资源对应的节点管理器发送启动任务请求;所述启动任务请求用于触发收到所述启动任务请求的节点管理器对应的容器资源运行所述待执行任务;
如果所述主进程接收到所述容器资源的任务完成信息,则向所述容器资源对应的节点管理器发送新的启动任务请求,直至没有需要运行的待执行任务;
其中,所述方法还包括,在所述主进程重新启动的情况下,所述主进程采用远程过程调用服务器的新地址与等待中的容器资源重新建立通信,以使所述等待中的容器资源继续运行尚未运行完成的任务。
2.如权利要求1所述的方法,其特征在于,在所述主进程重新启动的情况下,所述主进程采用远程过程调用服务器的新地址与等待中的容器资源重新建立通信,以使所述等待中的容器资源继续运行尚未运行完成的任务,包括:
所述主进程启动远程过程调用服务器,并将所述远程过程调用服务器的地址写到协调服务节点上,以使各所述容器资源通过获取所述协调服务节点上的所述远程过程调用服务器的地址与所述主进程保持通信;
在所述主进程重新启动的状态下,所述主进程将所述远程过程调用服务器的新地址写到所述协调服务节点上,并采用所述远程过程调用服务器的新地址重新与等待中的容器资源建立通信;所述等待中的容器资源包括在所述主进程重新启动前与所述主进程通信且存在尚未运行完成的任务的容器资源。
3.如权利要求2所述的方法,其特征在于,所述主进程将所述远程过程调用服务器的新地址写到所述协调服务节点上,并重新与等待中容器资源建立通信包括:
所述主进程新建协调服务节点,并将所述远程过程调用服务器的新地址写到新建的协调服务节点上;
所述主进程采用所述远程过程调用服务器的新地址与所述等待中的容器资源重新建立通信,以使所述等待中的容器资源继续运行尚未运行完成的任务。
4.如权利要求1所述的方法,其特征在于,如果所述主进程接收到所述容器资源的任务完成信息,则向所述容器资源对应的节点管理器发送新的启动任务请求,包括:
所述主进程接收各所述容器资源持续发送的心跳信息,所述心跳信息包括所述任务完成信息或任务正在运行信息;
所述主进程根据接收到的各所述容器资源的心跳信息,判断是否需要向各所述容器资源对应的节点管理器发送新的启动任务请求。
5.如权利要求1-4任一项所述的方法,其特征在于,所述待执行任务包括映射任务和/或归约任务。
6.一种资源复用装置,其特征在于,包括:
资源申请模块,用于控制主进程根据任务并发量向资源管理器申请多个容器资源,所述任务并发量包括待执行任务的数量,并基于客户需求和待执行任务数量获得所述容器资源的数量;
请求模块,用于控制主进程向申请到的所述容器资源对应的节点管理器发送启动任务请求;所述启动任务请求用于触发收到所述启动任务请求的节点管理器对应的容器资源运行所述待执行任务;其中,如果接收模块确定所述主进程接收到所述容器资源的任务完成信息,则向所述容器资源对应的节点管理器发送新的启动任务请求,直至没有需要运行的待执行任务;
启动模块,用于在所述主进程重新启动的情况下,控制所述主进程采用远程过程调用服务器的新地址与等待中的容器资源重新建立通信,以使所述等待中的容器资源继续运行尚未运行完成的任务。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810797252.X/1.html,转载请声明来源钻瓜专利网。





