[发明专利]一种基于能耗感知的Spark节能调度方法有效
申请号: | 201710452338.4 | 申请日: | 2017-06-15 |
公开(公告)号: | CN107704069B | 公开(公告)日: | 2020-08-04 |
发明(设计)人: | 李鸿健;王霍琛;代宇;熊安萍;蒋溢 | 申请(专利权)人: | 重庆邮电大学 |
主分类号: | G06F1/329 | 分类号: | G06F1/329;G06F9/48;G06F9/50 |
代理公司: | 重庆市恒信知识产权代理有限公司 50102 | 代理人: | 刘小红 |
地址: | 400065 重*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于能耗感知的Spark节能调度方法。首先构建Spark计算框架下大数据计算能耗模型,基于该模型建立任务与计算资源的能耗和执行时间关系策略表,通过策略表指导并优化Spark任务调度,在保证并行计算效率的前提下有效降低计算总能耗。本发明解决了Spark原有调度策略无法感知能耗的缺陷,该方法具有能耗感知,动态优化调度和高可扩展的特点,有效降低运行在Spark计算框架下的应用程序产生的能耗。 | ||
搜索关键词: | 一种 基于 能耗 感知 spark 节能 调度 方法 | ||
【主权项】:
一种基于能耗感知的Spark节能调度方法,其特征在于,包括以下步骤:首先,构建Spark计算框架下大数据计算能耗模型;其次,基于该模型建立任务与计算资源的能耗和执行时间关系策略表,通过策略表指导并优化Spark任务调度;最后,在保证并行计算效率的前提下有效降低计算总能耗。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆邮电大学,未经重庆邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710452338.4/,转载请声明来源钻瓜专利网。