[发明专利]一种在MESOS集群中集成高性能的作业调度框架的方法和装置

摘要

本发明公开了一种在MESOS集群中集成高性能的作业调度框架的方法和装置，该方法包括：获取作业调度框架的作业信息，其中，作业信息包括作业调度框架上的作业的资源占用信息；将作业信息和MESOS集群中的可用资源信息相匹配；以及在作业信息和MESOS集群中的可用资源信息匹配成功后，将作业的资源占用信息同步到MESOS集群中，从而更新MESOS集群中的可用资源信息。本发明通过上述技术方案，从而实现了在Mesos集群集成了Slurm/PBS等高性能的作业调度框架，使得高性能作业可以在Mesos集群中运行并同步资源占用情况到Mesos集群中，进一步实现了超融合调度框架，使得高性能作业和其他作业可以在同一集群中运行且互不影响。

主权项

1.一种在MESOS集群中集成高性能的作业调度框架的方法，其特征在于，包括：

获取所述作业调度框架的作业信息，其中，所述作业信息包括所述作业调度框架上的作业的资源占用信息；

将所述作业信息和所述MESOS集群中的可用资源信息相匹配；以及

在所述作业信息和所述MESOS集群中的可用资源信息匹配成功后，将所述作业的资源占用信息同步到所述MESOS集群中，从而更新所述MESOS集群中的可用资源信息。

2.根据权利要求1所述的方法，其特征在于，将所述作业信息和所述MESOS集群中的可用资源信息相匹配包括：

通过插件将收集到的所述作业调度框架上的所有作业的作业信息和所述MESOS集群中的可用资源信息相匹配。

3.根据权利要求2所述的方法，其特征在于，在所述作业信息和所述MESOS集群中的可用资源信息匹配成功后，将所述作业的资源占用信息同步到所述MESOS集群中，从而更新所述MESOS集群中的可用资源信息包括：

在所述作业信息和所述MESOS集群中的可用资源信息匹配成功后，所述插件根据所述资源占用信息，向所述MESOS集群提交任务，从而更新所述MESOS集群中的可用资源信息；以及

通过所述作业的ID号监控所述作业的运行状态。

4.根据权利要求3所述的方法，其特征在于，还包括：

所述作业调度框架根据所述作业的运行状态，更新所述任务的状态和资源的释放。

5.一种在MESOS集群中集成高性能的作业调度框架的装置，其特征在于，包括：

获取模块，用于获取所述作业调度框架的作业信息，其中，所述作业信息包括所述作业调度框架上的作业的资源占用信息；

匹配模块，用于将所述作业信息和所述MESOS集群中的可用资源信息相匹配；以及

更新模块，用于在所述作业信息和所述MESOS集群中的可用资源信息匹配成功后，将所述作业的资源占用信息同步到所述MESOS集群中，从而更新所述MESOS集群中的可用资源信息。

6.根据权利要求5所述的装置，其特征在于，所述匹配模块包括：

匹配子模块，用于通过插件将收集到的所述作业调度框架上的所有作业的作业信息和所述MESOS集群中的可用资源信息相匹配。

7.根据权利要求6所述的装置，其特征在于，所述更新模块包括：

更新子模块，用于在所述作业信息和所述MESOS集群中的可用资源信息匹配成功后，所述插件根据所述资源占用信息，向所述MESOS集群提交任务，从而更新所述MESOS集群中的可用资源信息；以及

监控模块，用于通过所述作业的ID号监控所述作业的运行状态。

8.根据权利要求7所述的装置，其特征在于，还包括：

更新释放模块，用于所述作业调度框架根据所述作业的运行状态，更新所述任务的状态和资源的释放。