[发明专利]一种工作流管理方法及装置

说明书

本发明适用于能源数据处理技术领域，提供一种工作流管理方法及装置，方法包括：对能源数据进行第一数据处理，以获取新加载数据，并将所述新加载数据写入细节数据表；对所述细节数据表进行第二数据处理，并将经过所述第二数据处理的数据按照能源设备类型分别加载到各基础数据表；对各所述基础数据表进行第三数据处理，并将经所述第三数据处理的数据写入各数据仓库主题；对所述数据仓库主题进行第四数据处理，并将经所述第四数据处理的数据按照业务单元分别写入各数据集市。本发明提供的工作流管理方法确保了能源数据仓库系统能自动周期性的有序执行，解决通用数据仓库无法应用于能源领域的问题，有助于形成统一、标准的数据体系。

技术领域

本发明属于数据处理技术领域，尤其涉及一种工作流管理方法及装置。

背景技术

数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。数据仓库之父Bill Inmon提出的企业数据仓库架构和Ralph Kimball提出的维度数据仓库架构是两个主流数据仓库构建方法。

传统数据仓库厂商都有比较成熟的数据仓库产品，也有针对某些行业的数据模型。例如，在银行业，Teradata有自己的FS-LDM(Teradata Financial Services LogicalData Model)模型，而IBM有自己的BDWM(Banking Data Warehouse Model)模型；在电信业，Teradata有自己的CLDM(Teradata Communications Logical Data Model)模型，而IBM有TDWM(Telecom Data Warehouse Model)。由于数据仓库中存在大量的数据采集、加工以及迁移等任务，并且这些任务之间存在依赖关系，为了确保数据仓库自动化周期性有序执行，需要工作流支持。

然而，上述这些数据模型都是基于传统关系数据库构建的，目前并没有针对能源行业的数据模型，进而也就没有针对能源行业数据模型的工作流管理方式，从而无法保证能源数据仓库系统的有序执行。

发明内容

有鉴于此，本发明实施例提供了一种工作流管理方法、装置、终端设备及计算机可读存储介质，以解决现有技术中没有针对能源行业数据仓库系统的工作流管理的技术问题。

本发明实施例的第一方面提供了一种工作流管理方法，包括：

对能源数据进行第一数据处理，以获取新加载数据，并将所述新加载数据写入细节数据表；

对所述细节数据表进行第二数据处理，并将经过所述第二数据处理的数据按照能源设备类型分别加载到各基础数据表；

对各所述基础数据表进行第三数据处理，并将经所述第三数据处理的数据写入各数据仓库主题；

对所述数据仓库主题进行第四数据处理，并将经所述第四数据处理的数据按照业务单元分别写入各数据集市。

本发明实施例的第二方面提供了一种工作流管理装置，包括：

细节数据表加载模块，用于对能源数据进行第一数据处理，以获取新加载数据，并将所述新加载数据写入细节数据表；

基础数据表加载模块，用于对所述细节数据表进行第二数据处理，并将经过所述第二数据处理的数据按照能源设备类型分别加载到各基础数据表；

主题加载模块，用于对各所述基础数据表进行第三数据处理，并将经所述第三数据处理的数据写入各数据仓库主题；

数据集市加载模块，用于对所述数据仓库主题进行第四数据处理，并将经所述第四数据处理的数据按照业务单元分别写入各数据集市。