[发明专利]一种融合多源异构电网数据的获取和分布式存储方法

摘要

本发明公开了一种融合多源异构电网数据的获取和分布式存储方法，包括以下步骤：依据各个业务系统数据特点建立接口协议并建立电网运行环境及设备数据模型规范；配置各业务系统的数据接入策略、配置数据校验规则；监控实时接入应用运行过程中产生的信息，对于监控到的故障信息，对故障期间丢失的数据进行数据补录；建立实时消息队列、数据广播和缓存电网运行数据的格式规范，把解析的在线监测数据、运行数据、雷电数据和气象数据进行广播到并存储到缓存消息队列上，按周期写入Hadoop分布式存储文件；将接入的数据和监控数据进行可视化展示。本发明创建了电网运行环境及设备数据模型规范，为统一电网系统数据建模奠定了基础。

主权项

1.一种融合多源异构电网数据的获取和分布式存储方法，其特征是，包括以下步骤：依据各个业务系统数据特点建立接口协议并建立电网运行环境及设备数据模型规范；配置各业务系统的数据接入策略、配置数据校验规则，从而实现实时接入应用和历史接入应用；监控实时接入应用运行过程中产生的日志信息、故障信息及告警信息，对于监控到的故障信息，对故障期间丢失的数据进行数据补录；建立数据广播和缓存电网运行数据的格式规范，把解析的在线监测数据、运行数据、雷电数据和气象数据进行广播到并存储到缓存消息队列上，按周期写入Hadoop分布式存储文件或HBase；将接入的数据和监控数据进行可视化展示；配置各业务系统的数据接入策略，包括与各个业务系统交互数据的规则协议、数据源地址、接口形式，其中，所述业务系统交互数据的规则协议主要包括实时数据交互协议、历史数据交互协议；实时交互协议主要描述系统数据向系统数据提供方发送请求参数的解释和系统数据提供方相应返回的数据内容属性的解释，描述触发机制即使用实时数据交互协议的频率；历史数据交互协议与实时数据交互协议请求和返回相同，但非定期触发；数据源地址主要描述系统数据提供方发布服务的ip地址及端口；接口形式主要描述系统数据提供方的发布数据的方式。