[发明专利]一种能源一体化采集系统的多任务实时调度方法

说明书

本发明公开了一种能源一体化采集系统的多任务实时调度方法，包括步骤：计算任务的初始参数；根据任务的有效期和价值密度，建立多任务调度的二维优先级表计算队列中所有任务的优先级；当任务优先级相同时，先到的任务先加入前置通信模块的待处理任务队列；当前置通信模块的待处理任务队列个数已达预定值时，则进入SPARK集群Master节点调度中心，否则继续循环步骤；采用自适应任务调度策略，定期动态调整其节点权值；把新加入SPARK集群Master节点调度中心的任务分配给选中的Worker节点，任务进入相应节点执行。本发明提高任务处理性能，实现对多任务处理系统高效管理。

技术领域

本发明涉及能源技术领域，具体涉及一种能源一体化采集系统的多任务实时调度方法。

背景技术

《计量发展规划(2013-2020年)》、《关于促进智能电网发展的指导意见》、《关于推进“互联网+”智慧能源发展的指导意见》等一系列文件，明确提出“应完善信息资源共享机制，支持能源数据集抄集采，建设能源数据集成平台，鼓励基础设施共享复用”、“丰富智能终端高级量测系统的实施功能，促进水、气、热、电的远程自动集采集抄，实现多表合一”。

基于用电信息采集系统的基础上增加对水表、气表和热力表的采集，建立能源计量一体化采集系统，实现多表合一。但由于能源计量点数量成倍增加，现有用电信息采集系统难以适应电、水、气、热能源综合计量发展的新形势和新要求，主要表现在采集数据量增多，采集频度提高，对外共享接口增加，系统并发处理能力不足，需要存储和处理的数据量是海量级的，对主站系统的并行计算能力、大容量存储和快速的数据访问能力都提出了新的需求，现有系统架构、技术方案、采集终端和通信协议难以满足能源计量一体化采集的应用需求。传统用电信息采集系统的多任务并发处理策略通常是根据任务属性分类执行，造成部分任务长时间未得到响应，导致系统用户体验差，上述问题制约了新的能源一体化采集系统的进一步发展和应用，急需提出新的多任务实时调度方法解决以上问题。

发明内容

为解决现有技术中的不足，本发明提供一种能源一体化采集系统的多任务实时调度方法，解决了传统能源采集系统的多任务并发处理由于部分任务长时间未得到响应，导致系统用户体验差的问题。

为了实现上述目标，本发明采用如下技术方案：一种能源一体化采集系统的多任务实时调度方法，其特征在于：包括步骤：

步骤1：当系统前置通信模块接收当前新加入任务时，计算该任务的初始参数；

步骤2：根据任务的有效期和价值密度，建立多任务调度的二维优先级表；

步骤3：通过多任务调度二维优先级表计算队列中所有任务的优先级；

步骤4：完成任务的优先级预处理后，根据优先级将任务排序，当任务优先级相同时，根据任务到达时间判断，先到的任务先加入前置通信模块的待处理任务队列；当前置通信模块的待处理任务队列个数已达预定值时，则进入SPARK 集群Master节点调度中心，否则继续循环步骤1-步骤4；

步骤5：SPARK集群Master节点调度中心采用自适应任务调度策略，每个 Worker节点动态根据CPU利用率CU、内存利用率MU作为衡量节点负载及资源情况，定期动态调整其节点权值，Master节点优先选择权值较大的Worker节点执行任务；

步骤6：把新加入SPARK集群Master节点调度中心的任务分配给步骤5选中的Worker节点，任务进入相应节点执行。

前述的一种能源一体化采集系统的多任务实时调度方法，其特征是：所述步骤1中，任务用公式表示为：

T_i＝<a_i,d_i,V_i,E_i,ved_i> (1)