[发明专利]基于Hadoop系统的任务调度方法和装置有效
| 申请号： | 201610076093.5 | 申请日： | 2016-02-03 |
| 公开（公告）号： | CN107038072B | 公开（公告）日： | 2019-10-25 |
| 发明（设计）人： | 陈军 | 申请（专利权）人： | 博雅网络游戏开发（深圳）有限公司 |
| 主分类号： | G06F9/50 | 分类号： | G06F9/50 |
| 代理公司： | 广州华进联合专利商标代理有限公司 44224 | 代理人： | 李文渊 |
| 地址： | 518057 广东省深圳市南山区中山*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及一种基于Hadoop系统的任务调度方法和装置，所述方法包括：统计已提交任务未运行的映射归约的总数目；从历史记录中读取待处理任务集中任务的映射归约数目；按照预设周期从待处理任务集中筛选出待启动任务，所述待启动任务的映射归约数目与所述总数目的和小于等于预设数目；所述预设数目为Hadoop系统在预设周期内可运行的映射归约数目；提交所述待启动任务。本发明提供的基于Hadoop系统的任务调度方法和装置，可实现负载均衡。 | ||
| 搜索关键词： | 基于 hadoop 系统 任务 调度 方法 装置 | ||
【主权项】：
1.一种基于Hadoop系统的任务调度方法，包括：统计已提交任务未运行的映射归约的总数目；从历史记录中读取待处理任务集中任务的映射归约数目；按照预设周期从所述待处理任务集中筛选出待启动任务，所述待启动任务的映射归约数目与所述总数目的和小于等于预设数目；所述预设数目为Hadoop系统在预设周期内可运行的映射归约数目；筛选出的待启动任务构成待启动任务集；当所述总数目小于预设数目的第一条件和所述待处理任务集中还有任务的第二条件中至少一者不满足时，提交所述待启动任务集。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于博雅网络游戏开发（深圳）有限公司，未经博雅网络游戏开发（深圳）有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201610076093.5/，转载请声明来源钻瓜专利网。
- 上一篇：一种便携式快递件分拣装卸传送装置
- 下一篇：一种物流用车辆卸货支撑座
