[发明专利]一种能源数据仓库系统

说明书

本发明适用于能源数据处理技技术领域，提供一种能源数据仓库系统，包括：操作数据层，包括细节数据表，数据源的能源数据经第一数据处理后写入细节数据表；基础数据层，包括各能源设备类型对应的基础数据表，细节数据表的数据经第二数据处理后写入基础数据表；通用数据层，包括与业务分析需要对应的数据仓库主题，基础数据表的数据经第三数据处理后写入数据仓库主题；应用数据层，包括与业务单元对应的数据集市，数据仓库主题的数据经第四数据处理后写入数据集市。本发明有效解决了通用数据仓库无法应用于能源领域的问题，有助于形成统一、标准的数据体系，方便数据分析师和数据科学家基于高质量的海量数据进行实时有效分析。

技术领域

本发明属于能源数据处理技术领域，尤其涉及一种能源数据仓库系统。

背景技术

数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。数据仓库之父Bill Inmon提出的企业数据仓库架构和Ralph Kimball提出的维度数据仓库架构是两个主流数据仓库构建方法。

传统数据仓库厂商都有比较成熟的数据仓库产品，也有针对某些行业的数据模型。例如，在银行业，Teradata有自己的FS-LDM(Teradata Financial Services LogicalData Model)模型，而IBM有自己的BDWM(Banking Data Warehouse Model)模型；在电信业，Teradata有自己的CLDM(Teradata Communications Logical Data Model)模型，而IBM有TDWM(Telecom Data Warehouse Model)。然而，这些模型主要针对传统行业，并没有针对能源行业的数据模型，无法适应能源行业特点；并且这些数据模型都是基于传统关系数据库构建的，不能适应当前海量数据的实时和准实时的分析需求，也无法根据分析主题的变化而进行灵活处理。

发明内容

有鉴于此，本发明实施例提供了一种能源数据仓库系统，以解决现有技术中没有针对能源行业的数据仓库系统的技术问题。

本发明实施例提供了一种能源数据仓库系统，包括：

操作数据层，包括细节数据表，数据源的能源数据经第一数据处理后写入所述细节数据表；

基础数据层，包括各能源设备类型对应的基础数据表，所述细节数据表的数据经第二数据处理后写入所述基础数据表；

通用数据层，包括与业务分析需要对应的数据仓库主题，所述基础数据表的数据经第三数据处理后写入所述数据仓库主题；

应用数据层，包括与业务单元对应的数据集市，所述数据仓库主题的数据经第四数据处理后写入所述数据集市。

在一个实施例中，所述数据源的能源数据至少包括能源设备运行数据、能源系统配置数据、业务开展过程中的业务数据、通过网络获取的网络数据以及第三方系统提供的第三方数据中的一种。

在一个实施例中，所述操作数据层还包括原始数据表；

所述第一数据处理至少包括：

将所述能源数据加载至所述原始数据表；

对所述能源数据进行解析，以确定所述原始数据表中的新加载数据；

去除出所述新加载数据中的异常数据；

根据能源设备类型和获取时间对所述新加载数据进行分区。

在一个实施例中，所述细节数据表中至少包括站点信息、设备类型、设备标识、量测属性、量测时间以及量测值中的一项。

在一个实施例中，所述基础数据层至少包括燃气蒸汽锅炉基础数据表、空压机基础数据表、能量表基础数据表、业务数据基础数据表以及环境数据基础数据表中的一种。