[发明专利]资源调度方法、装置、设备和系统

说明书

本发明实施例提供一种资源调度方法、装置、设备和系统，该方法包括：若第一集群实例自有的可用资源低于阈值，则第一集群实例向第二集群实例发送资源借用请求；接收第二集群实例返回的可借用资源信息，该可借用资源信息表征第二集群实例中可借用的数据服务器资源；第一集群实例获取可借用的数据服务器资源，用于进行数据处理，从而实现集群实例间的资源复用，也充分地使用了各个集群实例的资源，提高了集群的资源使用率。

技术领域

本发明涉及互联网技术领域，尤其涉及一种资源调度方法、装置、设备和系统。

背景技术

在处于信息爆炸时代的当今，各种各样的网络业务所产生的数据量成指数倍的增长，为满足海量数据的存储容量、数据备份、数据安全等需求，分布式文件系统集群应运而生，简单来说，分布式文件系统集群由可以提供完整业务计算逻辑的一组服务器构成。

在一种应用场景中，分布式文件系统集群可能会被多个不同的业务共享，或者会被一个业务的多种不同任务或者称为子业务共享，此时，可以将分布式文件系统集群划分为多个集群实例(或者也可以称为单元集群、子集群等)，每个集群实例可以被至少一个业务或任务使用。每个集群实例都包含属于自己的一个元数据服务器(MS)和多个数据服务器(CS)。

当业务产生的数据增加导致分布式文件系统集群资源不足时，目前是通过独立扩容的方式来增加分布式文件系统的资源，比如增加某个或某几个集群实例中包含的CS数量。但是，越来越多的业务具有很大的数据量波动性，比如某业务可能只是短暂的数据量突增，此时，扩容的方式，一方面由于在发现数据量严重增加时才触发扩容，扩容的实时性不能满足当前突增的数据量的实时处理需求，另一方面，为了应对数据量突发增长而扩容往往也会带来很大的资源浪费。

发明内容

有鉴于此，本发明实施例提供一种资源调度方法、装置、设备和系统，用以实现集群实例间的资源复用，提高集群的资源利用率。

第一方面，本发明实施例提供一种资源调度方法，该方法包括：

若第一集群实例自有的可用资源低于阈值，所述第一集群实例向第二集群实例发送资源借用请求；

接收所述第二集群实例返回的可借用资源信息，所述可借用资源信息表征所述第二集群实例中可借用的数据服务器资源；

所述第一集群实例获取所述可借用的数据服务器资源，用于进行数据处理。

第二方面，本发明实施例提供一种资源调度装置，应用于第一集群实例，该装置包括：

发送模块，用于若第一集群实例自有的可用资源低于阈值，所述第一集群实例向第二集群实例发送资源借用请求；

接收模块，用于接收所述第二集群实例返回的可借用资源信息，所述可借用资源信息表征所述第二集群实例中可借用的数据服务器资源；

处理模块，用于所述第一集群实例获取所述可借用的数据服务器资源，用于进行数据处理。

第三方面，本发明实施例提供一种电子设备，该电子设备可以包括处理器和存储器，所述存储器用于存储支持电子设备执行上述第一方面中资源调度方法的程序，所述处理器被配置为用于执行所述存储器中存储的程序。该电子设备中还可以包括通信接口，用于与其他设备或通信网络通信。

另外，本发明实施例提供了一种计算机存储介质，用于储存该电子设备所用的计算机软件指令，其包含用于执行上述第一方面中资源调度方法所涉及的程序。

第四方面，本发明实施例提供一种资源调度方法，该方法包括：

若第一集群实例自有的可用资源低于阈值，所述第一集群实例向第二集群实例发送资源借用请求；

响应于所述资源借用请求，所述第二集群实例确定所述第二集群实例中可借用的数据服务器资源；