[发明专利]资源调度方法、装置、服务器及计算机可读存储介质在审
申请号: | 202110368376.8 | 申请日: | 2021-04-06 |
公开(公告)号: | CN113515355A | 公开(公告)日: | 2021-10-19 |
发明(设计)人: | 钱玉磊;余建平 | 申请(专利权)人: | 北京三快在线科技有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 谢冬寒 |
地址: | 100080 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 资源 调度 方法 装置 服务器 计算机 可读 存储 介质 | ||
本公开提供了一种资源调度方法、装置、服务器及计算机可读存储介质,属于互联网技术领域。所述方法包括:当指定类型的在线任务处于流量的低峰期时,根据指定类型的在线任务闲置的资源,构建弹性混布资源池;确定指定类型的离线任务所需的资源类型;调用弹性混布资源池中相应类型的资源执行指定类型的离线任务。本公开通过将在线任务和离线任务分为不同的类型,当在线任务处于流量的低峰期时,采用在线任务闲置的资源处理同一类型的离线任务,由于同一类型的任务所依赖的资源类型是相同的,且进行调度时针对同一类型的离线任务所需的资源类型进行资源调度,因而能够从资源粒度实现资源的合理利用,从而大大提高了资源的利用率。
技术领域
本公开涉及互联网技术领域,特别涉及一种资源调度方法、装置、服务器及计算机可读存储介质。
背景技术
很多互联网公司的流量都呈现了非常明显的高低峰差距,通常白天午间为流量的高峰期,从晚上23点到次日上午9点为流量的低峰期,高峰期的流量常常是低峰期的流量的数百倍,甚至数千倍。为了缓解高峰期的流量压力,互联网公司往往会部署大量冗余的在线资源。然而,这些资源在流量的低峰期时浪费非常严重,例如,流量的高峰期CPU(CentralProcessing Unit,中央处理器)的利用率高达80%,而流量的低峰期CPU的利用率则低至10%以下。为了解决资源浪费问题,提高资源利用率,需要对资源进行合理地调度。
目前,很多互联网公司在流量的高峰期时,将冗余的在线资源用于在线任务的计算;在流量的低峰期时将离线任务调度到在线集群进行计算。
然而,离线任务和在线任务既有重IO(Input Output,输入输出)类型的任务,也有重计算类型的任务,通常不同类型的任务所消耗的资源类型不同,而相关技术在进行资源调度时随机进行调度,导致资源利用率较低。
发明内容
本公开实施例提供了一种资源调度方法、装置、服务器及计算机可读存储介质,能够提高资源的利用率。所述技术方案如下:
第一方面,提供了一种资源调度方法,所述方法包括:
当指定类型的在线任务处于流量的低峰期时,根据所述指定类型的在线任务闲置的资源,构建弹性混布资源池;
确定指定类型的离线任务所需的资源类型;
调用所述弹性混布资源池中相应类型的资源执行指定类型的离线任务。
在本公开的另一个实施例中,所述根据所述指定类型的在线任务闲置的资源,构建弹性混布资源池之前,还包括:
获取所述指定类型的在线任务对应的存储系数,所述存储系数表示在流量的低峰期时所述指定类型的在线任务所需的存储资源所占的百分比;
根据所述存储系数,确定所述指定类型的在线任务闲置的存储资源。
在本公开的另一个实施例中,所述根据所述指定类型的在线任务闲置的资源,构建弹性混布资源池,包括:
为所述指定类型的在线任务闲置的计算资源设置第一IP(Internet Protocol,网络互连协议)地址和第一端口号,并为所述指定类型的在线任务闲置的存储资源设置第二IP地址和第二端口号;
建立所述指定类型的在线任务的计算资源与所述第一IP地址和第一端口号之间的第一对应关系,并建立所述指定类型的在线任务的存储资源与所述第二IP地址和第二端口号之间的第二对应关系;
基于所述第一对应关系和所述第二对应关系,构建所述弹性混布资源池。
在本公开的另一个实施例中,所述调用所述弹性混布资源池中相应类型的资源执行指定类型的离线任务,包括:
根据所述指定类型的离线任务所需的资源类型,为所述指定类型的离线任务分配相应的IP地址和端口号;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司,未经北京三快在线科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110368376.8/2.html,转载请声明来源钻瓜专利网。