[发明专利]基于MapReduce架构实现图处理的方法和装置有效
申请号: | 201310043220.8 | 申请日: | 2013-01-31 |
公开(公告)号: | CN103970604B | 公开(公告)日: | 2017-05-03 |
发明(设计)人: | 史巨伟;陈冠诚;刘弢;王鲲;王晨 | 申请(专利权)人: | 国际商业机器公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 中国国际贸易促进委员会专利商标事务所11038 | 代理人: | 李镇江 |
地址: | 美国*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于MapReduce架构实现图处理的方法和装置,该方法包括接收图处理作业的输入文件;利用获取的MapReduce任务的度数与执行时间的关系分布和所述图处理作业的度数分布预测所述图处理作业的MapReduce任务执行时间分布;根据预测的所述图处理作业的MapReduce任务执行时间分布将所述图处理作业的输入文件切分为MapReduce任务的输入数据分片。本发明实施例的方法能够实现均衡Map任务和Reduce任务的计算负载,从而高效地完成图处理作业。 | ||
搜索关键词: | 基于 mapreduce 架构 实现 处理 方法 装置 | ||
【主权项】:
基于MapReduce架构实现图处理的方法,包括:接收图处理作业的输入文件;利用获取的MapReduce任务的度数与执行时间的关系分布和所述图处理作业的度数分布预测所述图处理作业的MapReduce任务执行时间分布;根据预测的所述图处理作业的MapReduce任务执行时间分布将MapReduce任务的输入文件切分为MapReduce任务的输入数据分片。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国际商业机器公司,未经国际商业机器公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310043220.8/,转载请声明来源钻瓜专利网。
- 上一篇:门中门
- 下一篇:一种复合型材节能门窗