[发明专利]一种监控数据实时处理方法、非暂态可读记录媒体及数据处理系统

说明书

本发明属于监控现场信息数据处理技术领域，公开了一种监控数据实时处理方法，包括：采集原始量测数据，根据设定的模型划分数据集并给其配置相应的处理空间，进行数据处理成本的运算，优化数据处理策略后在各处理空间采取差异化的方式进行数据处理，本发明还提供了一种存储了监控数据实时处理程序的非暂态可读记录媒体及包含该媒体的系统，通过处理电路可以调用该压缩程序，以执行上述监控数据实时处理方法，获得最优的大数据处理成本，适用于分布式环境下监控现场信息数据的处理环节。

技术领域

本发明属于监控现场信息数据处理技术领域，具体公开了一种监控数据实时处理方法、非暂态可读记录媒体及数据处理系统。

背景技术

智能电网的建设对应急指挥辅助决策系统提出了更高的要求。近年来，为了提高电网应急事故处理效率，国内外研发了应急指挥车、单兵装备等多种应急抢修技术手段，此类手段一定程度上提高了应急抢修效率。然而，现存技术手段智能化程序较低，在通信条件差、恶劣灾害等条件下存在功能不实用、现场作业不方便、数据传输不规范、海量数据传输不通畅、数据处理不及时等问题，由于数据量大，集中处理的处理成本和传输成本太高导致监控现场数据采集者对数据进行人为的取舍以及信息滞后，中心侧的管理者往往无法获得实时、准确的现场数据，进而不能对现场进行实时的、有效的管控。

发明内容

为克服现有技术在监控数据传输与处理方面的不足，本发明提供了一种监控数据实时处理方法，包括以下步骤：

S1，建立包括从上至下通信互联的云数据中心层、边缘层、终端层三个层级逻辑树结构的分布式数据处理框架；

S2，获取监测现场数据/任务集A；对输入数据/任务通过多个策略进行分割处理，将所述数据/任务集A按数据量分割为A₁,A₂,和A₃，A₁+A₂+A₃＝A，其中A₁在本地所述终端层处理，A₂加载到所述边缘层处理，A₃加载到云数据中心层处理；

S3,计算不同策略的传输成本；

S4，选择成本最小的策略；

S5,根据S4所选择的策略进行数据处理。

优选的，步骤S2中设定所述数据集A₂压缩后再传输，压缩比为α₁，所述数据集A₃压缩后再传输，压缩比为α₂；

步骤S3中的成本是时间成本或金额成本，设定数据/任务在本地所述终端层执行计算成本单价为C₀，云数据中心层计算成本单价为C_c，边缘层计算成本单价为C_m，加载到所述云数据中心层传输成本为T_c，加载到所述边缘层传输成本为T_m，不计压缩成本，则数据处理总成本C＝T_mα₁A₂+Tcα

₂A₃+C₀A₁+C_mα₁A₂+C_cα₂A₃。

优选的，边缘层包括多个计算、存储、信息交换设备，其中至少一台设备上安装有边缘计算平台，所述边缘计算平台统一调度管理所述边缘层资源，为该层数据计算提供支撑。

进一步的，边缘计算平台调度管理的所述边缘层资源还包括边缘计算设备层、和专用计算节点层，所述专用计算节点层根据网络从属关系细分为专用计算从节点和主节点。