[发明专利]作业调度的方法及装置在审
申请号: | 201611257698.0 | 申请日: | 2016-12-30 |
公开(公告)号: | CN108268316A | 公开(公告)日: | 2018-07-10 |
发明(设计)人: | 薛戬 | 申请(专利权)人: | 北京国双科技有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 北京鼎佳达知识产权代理事务所(普通合伙) 11348 | 代理人: | 王伟锋;刘铁生 |
地址: | 100086 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 作业调度 目标作业 数据迁移 空闲 互联网技术 计算效率 节点查找 任务调度 预设条件 调度 应用 | ||
1.一种作业调度的方法,其特征在于,所述方法包括:
根据各任务调度Task Tracker节点的使用状态,选择空闲的Task Tracker节点;
从空闲的Task Tracker节点中选择符合预设条件的目标Task Tracker节点;
为所述目标Task Tracker节点查找目标作业;
将所述目标作业调度至目标Task Tracker节点进行计算。
2.根据权利要求1所述的方法,其特征在于,所述为所述目标Task Tracker节点查找目标作业,包括:
若存在同主机作业,则按照优先级的顺序从所述同主机作业中查找目标作业,所述同主机作业为申请的资源是所述目标Task Tracker节点所属的主机的资源的作业;
若不存在同主机作业,则按照优先级的顺序从同机架作业中查找目标作业,所述同机架作业为申请的资源是与所述目标Task Tracker节点所属的主机为同机架的其他主机的资源的作业。
3.根据权利要求2所述的方法,其特征在于,所述为所述目标Task Tracker节点查找目标作业,还包括:
若不存在同机架作业,则按照优先级顺序从最久未调度的作业中查找目标作业。
4.根据权利要求2或3中任一所述的方法,其特征在于,在按照优先级顺序查找目标作业之前,所述方法进一步包括:
根据当前时间与作业的提交时间之间的间隔时长、提交作业的用户的等级以及作业申请的资源量确定对应的作业的优先级。
5.根据权利要求1所述的方法,其特征在于,在所述将所述目标作业调度至目标TaskTracker节点进行计算之后,所述方法进一步包括:
判断是否存在未调度的作业;
若存在未调度的作业,则继续选择目标Task Tracker节点;
若不存在未调度的作业,则结束调度。
6.一种作业调度的装置,其特征在于,所述装置包括:
第一选择单元,用于根据各任务调度Task Tracker节点的使用状态,选择空闲的TaskTracker节点;
第二选择单元,用于从空闲的Task Tracker节点中选择符合预设条件的目标TaskTracker节点;
查找单元,用于为所述目标Task Tracker节点查找目标作业;
计算单元,用于将所述目标作业调度至目标Task Tracker节点进行计算。
7.根据权利要求6所述的装置,其特征在于,所述查找单元,包括:
第一查找模块,用于若存在同主机作业,则按照优先级的顺序从所述同主机作业中查找目标作业,所述同主机作业为申请的资源是所述目标Task Tracker节点所属的主机的资源的作业;
第二查找模块,用于若不存在同主机作业,则按照优先级的顺序从同机架作业中查找目标作业,所述同机架作业是申请的资源为与所述目标Task Tracker节点所属的主机为同机架的其他主机的资源的作业。
8.根据权利要求7所述的装置,其特征在于,所述查找单元还包括:
第三查找模块,用于若不存在同机架作业,则按照优先级顺序从最久未调度的作业中查找目标作业。
9.根据权利要求7或8中任一所述的装置,其特征在于,所述装置进一步包括:
确定单元,用于在按照优先级顺序查找目标作业之前,根据当前时间与作业的提交时间之间的间隔时长、提交作业的用户的等级以及作业申请的资源量确定对应的作业的优先级。
10.根据权利要求6所述的装置,其特征在于,所述装置进一步包括:
判断单元,用于在所述将所述目标作业调度至目标Task Tracker节点进行计算之后,判断是否存在未调度的作业;
第三选择单元,用于若存在未调度的作业,则继续选择目标Task Tracker节点;
结束单元,用于若不存在未调度的作业,则结束调度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京国双科技有限公司,未经北京国双科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611257698.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种媒体物料数据的处理方法及装置
- 下一篇:一种资源分配方法及装置