[发明专利]一种资源管理方法及系统

说明书

本发明实施例提供了一种资源管理方法及系统，其中，所述资源管理方法包括：接收第一作业任务提交消息，第一作业任务提交消息中包括：待处理的作业、处理作业的第一资源需求信息和处理作业的第一资源管理框架；将第一资源需求信息转换为第一资源管理框架对应的第二资源需求信息；将第二资源需求信息和作业发送至第一资源管理框架，以使第一资源管理框架根据第二资源需求信息分配运行作业所需的第一资源，并根据分配的第一资源运行作业。通过本发明实施例提供的资源管理方法，实现降低资源管理成本，以及降低资源管理和调度的复杂度。

技术领域

本发明涉及计算机技术领域，特别是涉及一种资源管理方法及系统。

背景技术

随着时代的进步，大数据逐渐成为企业及行业的最重要资产之一，企业中的发展决策与市场定位行为将基于该些大数据分析做出，而不是像过去更多凭借经验和直觉。

与此同时，用于分析该些大数据以得到用于企业发展决策与市场定位结果的大数据计算框架应运而生，由于不同的大数据计算框架所需的资源类型不同，因此，支持不同的大数据计算框架运行的资源管理框架也随之产生。随着云计算、大数据以及多媒体技术的不断发展，要处理的业务类型也日益增多，如此就使得有很多的应用场景，而众多的应用场景就需要多种不同类型的资源管理框架，同时，在技术的不断发展过程中，需要调研业界现有的技术，比如不同的资源管理框架，调研的过程中往往要部署多种资源框架并进行性能测试，所以现存的资源管理系统内部部署有多种不同类型的资源管理框架。

图1所示为大数据分析的系统架构图，如图1所示，该系统包括：资源管理框架和大数据计算框架，目前，当用户需要使用上述系统分析大数据时，用户首先将大数据作业任务请求消息以资源管理框架所规定的方式提交至资源管理框架，其中，大数据作业任务中会包括执行大数据作业任务所需的大数据计算框架类型，以及执行大数据作业任务的资源需求量，然后资源管理框架根据执行大数据作业任务的资源需求量为大数据作业任务分配资源，进而大数据计算框架使用资源管理框架分配的资源运行大数据作业任务。

由于资源管理框架的种类繁多，且每种资源管理框架所规定的大数据作业任务请求消息的提交方式不同，当将相同的大数据作业任务提交至不同类型的资源管理框架以运行大数据作业任务时，如果提交的大数据作业任务请求消息与资源管理框架不对应，就会造成资源管理框架无法有效为大数据作业任务分配执行大数据作业任务的资源需求量，使得大数据计算框架无法正常的运行大数据作业任务而导致运行结果出错，从而影响企业发展决策与市场定位的准确性。现有的部署有多种类型的资源管理框架时，大数据计算框架需要和资源管理框架进行手工适配，大数据计算框架和不同的资源资源管理框架之间需要使用不同的管理、调度接口，使得资源管理成本高、资源管理及调度复杂度高。

发明内容

本发明实施例的目的在于提供一种资源管理方法及系统，以实现降低资源管理成本，以及降低资源管理和调度的复杂度。具体技术方案如下：

本发明实施例提供了一种资源管理方法，包括：

接收第一作业任务提交消息，所述第一作业任务提交消息中包括：待处理的作业、处理所述作业的第一资源需求信息和处理所述作业的第一资源管理框架；

将所述第一资源需求信息转换为所述第一资源管理框架对应的第二资源需求信息；

将所述第二资源需求信息和所述作业发送至所述第一资源管理框架，以使所述第一资源管理框架根据所述第二资源需求信息分配运行所述作业所需的第一资源，并根据分配的所述第一资源运行所述作业。

优选的，所述第一资源需求信息包括第一资源需求类型标识和第一资源需求量；

所述将所述第一资源需求信息转换为所述第一资源管理框架对应的第二资源需求信息包括：