[发明专利]用于调度工作流作业的设备和方法

摘要

提供了工作流作业调度设备及其方法。该方法包括：当定义用户工作流时，作为最终结果指定每一作业的输出文件是否是必要的，收集构成该用户工作流的个别应用的资源使用信息，如果连续作业是I/O密集作业，则指定数据地点依赖性参数，使得在其中运行连续作业之中的前一作业的节点处运行连续作业之中的后一作业，并基于对于计算系统的所有资源收集的实时工作负荷信息，来调度要依次运行的对于同一计算节点具有数据地点依赖性的一组作业。

主权项

一种工作流作业调度设备，包括：工作流用户接口单元，被配置为提供用于用户工作流的接口；工作流引擎单元，被配置为使用个别应用的资源使用信息来将用户工作流变换为运行工作流，执行该运行工作流，并生成调度指令；资源管理单元，被配置为收集和管理用于计算系统的所有资源的实时工作负荷信息；作业调度单元，被配置为基于该实时工作负荷信息并根据该调度指令，来调度要依次运行的对同一计算节点具有数据地点依赖性的一组作业；计算资源作业管理单元，位于个别计算节点处，并被配置为当该作业调度单元请求作业的运行时，在所分配的节点处运行作业；计算节点监视单元，被配置为当在个别计算资源处正运行作业时，监视个别计算资源的负荷信息，并将该负荷信息提供到该资源管理单元；全局文件系统资源监视单元，被配置为测量全局文件系统的使用比率和总输入/输出（I/O）带宽，并将测量信息提供到该资源管理单元；和应用资源使用管理单元，被配置为基于来自该全局文件系统资源监视单元的测量信息和来自该计算节点监视单元的负荷信息，来生成个别应用的资源使用信息。