[发明专利]内容整合引擎调度方法及装置

说明书

技术领域

本发明涉及计算机及网络技术，尤其涉及一种内容整合引擎调度方法及装置。

背景技术

随着以网络技术为代表的新兴计算技术的发展，基于面向服务的体系结构（Service Oriented Architecture，SOA）将信息系统组件封装并发布为可通过互联网访问的标准的Web服务，在这样的背景下，提出了内容整合（Mashup）的概念。Mashup是Web2.0的代表技术之一，Mashup是指将不同来源的数据或服务进行组合，构建出一种具有新型功能的网络应用。既可以完成服务的快速构建，也可以满足用户自主参与进行数据处理的需求。

Mashup平台中的Mashup应用由一个或多个操作子（Operator）组成，Operator也可以被称为节点。Mashup平台中的运行引擎对Mashup应用进行运行时，各Operator对数据流进行简要的加工，整个运行过程中数据流占用Mashup平台中的内存资源。根据Mashup应用的数据流的特点，对于从两个或多个节点接收数据的汇聚节点，该汇聚节点会在同步等待各输入数据流全部流入之后，对数据流进行相应的处理，并将处理后的数据流输出至下一节点。

但是，如果汇聚节点的多个输入数据流中有一个或多个未准备完毕，即有数据流未输入该汇聚节点，则即使其他各数据流已输入该汇聚节点，该汇聚节点也无法进行相应的处理，使得已准备完毕的各输入的数据流依然占用内存，造成内存资源无法及时得到释放，会造成数据流的阻塞，因此，现有技术中Mashup平台的内存资源的利用率较低。

发明内容

本发明提供了一种内容整合引擎调度方法及装置，用于提高Mashup平台内存资源的利用率。

本发明的第一个方面是提供一种内容整合引擎调度方法，包括：

将待运行的内容整合Mashup应用分解为多个调度支Mashlet，所述Mashlet包括一个或多个操作子；

根据各所述Mashlet运行的预估时长，分别确定将各入度为零的Mashlet加入队列的起始时间点，所述Mashlet运行的预估时长为所述Mashlet包括的各所述操作子运行的预估时长之和，以使具有相同输出节点的两个或多个Mashlet运行完成的时间差在预设的时间范围内；

根据所述起始时间点，将所述各入度为零的Mashlet加入所述队列，并且在所述队列中具有相同输出节点的两个或多个Mashlet均运行完成之后，将所述输出节点对应的Mashlet加入所述队列；

从操作子池中调用所述队列中的Mashlet包括的各所述操作子，运行所述队列中的Mashlet，直至所述队列中的Mashlet全部运行完成。

本发明的另一个方面是提供一种内容整合引擎，包括：

分解器，用于将待运行的内容整合Mashup应用分解为多个Mashlet，所述Mashlet包括一个或多个操作子；根据各所述Mashlet运行的预估时长，分别确定将各入度为零的Mashlet加入队列的起始时间点，所述Mashlet运行的预估时长为所述Mashlet包括的各所述操作子运行的预估时长之和，以使具有相同输出节点的两个或多个Mashlet运行完成的时间差在预设的时间范围内；

队列处理器，用于根据所述起始时间点，将所述各入度为零的Mashlet加入所述队列，并且在所述队列中具有相同输出节点的两个或多个Mashlet均运行完成之后，将所述输出节点对应的Mashlet加入所述队列；

执行器，用于从操作子池中调用所述队列中的Mashlet包括的各所述操作子，运行所述队列中的Mashlet，直至所述队列中的Mashlet全部运行完成。

本发明的又一个方面是提供一种内容整合平台，包括上述内容整合引擎。