[发明专利]一种集群任务管理系统

说明书

本发明公开了一种集群任务管理系统，包括：任务调度中心接收用户的操作请求，根据操作请求生成对应的任务指令，将任务指令下发至分布式缓存中间件，接收分布式缓存中间件返回的任务处理信息；分布式缓存中间件接收任务指令，将任务指令发送至任务处理模块，接收任务处理模块返回的任务处理信息，并将任务处理信息发送至任务调度中心；设置于各节点的任务处理模块接收任务指令，根据任务指令进行对应的任务处理，生成任务处理信息，并将任务处理信息发送至分布式缓存中间件。该系统将集群管理的任务由集中化转为分散化，通过任务调度中心、分布式缓存中间件以及设置于各节点的任务处理模块的配合，实现集群管理的去中心化，均衡集群负载。

技术领域

本发明涉及集群技术领域，特别涉及一种集群任务管理系统。

背景技术

集群是一组相互独立的、通过高速网络互联的计算机，它们构成了一个组，并以单一系统的模式加以管理。通过集群技术，可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益，集群应用十分广泛。

集群中任务调度为其中的核心技术。集群的主要目的是以一个整体的形式对外提供业务，因为集群的管理而造成的额外负担不能影响集群的正常的业务。

现有的集群级的管理中，通常是选定单一主节点，由主节点进行任务的下发及处理。此种模式下，在业务负载均衡的情况下，主节点比其它节点多了一种负载，即管理负载，在管理负载过高的情况下，会造成主节点相比其它节点负载压力过大，集群负载不均衡的情况，负载不均衡的情况容易导致主节点处理迟缓，且容易崩溃，一旦主节点崩溃，将导致整个集群系统的管理将陷入瘫痪。

因此，如何分散集群中主节点的管理负载压力，均衡集群负载，是本领域技术人员需要解决的技术问题。

发明内容

本发明的目的是提供一种集群任务管理系统，该系统将集群管理的任务由集中化转为分散化，通过任务调度中心、分布式缓存中间件以及设置于各节点的任务处理模块的配合，实现集群管理的去中心化，均衡集群负载。

为解决上述技术问题，本发明提供一种集群任务管理系统，包括：

任务调度中心，用于接收用户的操作请求，根据所述操作请求生成对应的任务指令，将所述任务指令下发至分布式缓存中间件，接收所述分布式缓存中间件返回的任务处理信息；

所述分布式缓存中间件，用于接收所述任务指令，将所述任务指令发送至任务处理模块，接收所述任务处理模块返回的任务处理信息，并将所述任务处理信息发送至所述任务调度中心；

设置于各节点的任务处理模块，用于接收所述任务指令，根据所述任务指令进行对应的任务处理，生成任务处理信息，并将所述任务处理信息发送至所述分布式缓存中间件。

优选地，所述任务处理模块包括：

任务接收子模块，用于接收任务指令；

任务执行子模块，用于根据所述任务指令进行相应的任务处理，生成执行结果；

结果处理子模块，用于对所述执行结果进行输出处理，生成任务处理信息；其中，所述输出处理包括添加节点标识信息。

优选地，所述分布式缓存中间件具体用于：将接收到的各节点的任务指令发送至所有任务处理模块；

则所述任务接收子模块具体用于：根据所属的节点对接收到的各节点的任务指令进行监测，判断所述各节点的任务指令中是否包含本节点的任务指令；如果有，筛选得到本节点的任务指令并发送至任务执行子模块。

优选地，所述分布式缓存中间件具体用于：将接收到的各节点的任务指令进行节点识别，将各节点的任务指令分别发送至对应节点；

则所述任务接收子模块具体用于：将接收到的任务指令发送至任务执行子模块。